近日,中国多媒体大会(ChinaMM2023)在云南昆明召开,大会聚焦多媒体领域技术与应用发展,集结了多媒体领域专业人士。快手高级副总裁、研发线负责人于冰受邀在大会上发表了《AGI时代下智能媒体技术前沿进展与思考》主题演讲,结合快手在多媒体技术领域内的创新实践,分享快手的技术前沿进展及相关思考。
自2011年成立至今,快手已经发展成为国民级短视频直播数字社区,在用户、内容、商业等方面保持良性增长态势。而快手社区生态的蓬勃发展,离不开快手长期的巨大投入,以大规模自研技术支撑业务发展。
【资料图】
回顾快手过往经历,于冰表示,业务发展会经历入局、成长、成熟等多个阶段,在业务发展的不同阶段,快手所采取的研发策略也各有侧重。创新成长期更注重持续投入,探索新产品、新周期;而成熟阶段则需聚焦优化效率,兼顾体验,既保证产品体验的竞争力,又保证业务的稳健成长。
于冰以快手音视频业务为例,目前该业务已步入成熟期,研发策略重点也转移至提升效率、优化成本,追求单位成本下算力、存储和网络使用效率的提升。快手基于自研视频质量评估KVQ、视频增强修复KEP和KRP、视频压缩编码算法KVC等一系列核心技术,形成数据驱动的视频处理闭环,在兼顾体验的同时极致压缩视频。
2022年,快手技术toB业务StreamLake推出了首款自研智能视频处理芯片SL200,该芯片集成了快手领先的视频编解码、图像处理、AI推理、内容自适应编码等关键技术,具备高质量、高密度、智能化的特点,在业内处于领先地位。在今年7月举办的MSU2022世界编码器大赛中,SL200一举夺得4K和1080P赛道24项指标中的16项第一。在本届大会上,SL200也荣获了中国多媒体企业创新技术奖。目前,SL200芯片已全面应用于快手的直播和短视频业务,实现成熟技术通过StreamLake对产业赋能。
而在数字人领域,快手也取得了诸多领先成果。快手全链路自研了光场扫描重建、超写实人像建模、智能绑定、动作捕捉与驱动、物理仿真等数字人核心技术,推出「快手虚拟演播助手(KVS)」和「快手智播」两大解决方案;结合内容平台在品牌营销领域的独特优势,在美术、技术、运营、营销等多个维度赋能,打造了百万粉丝虚拟主播关小芳、蒙牛集团首位虚拟员工奶思等多个知名IP。未来,结合智能编曲、图像/视频生成、LLM等AI能力,快手数字人技术将继续在文旅、教育、游戏、直播电商等领域广泛应用,助力客户打造高品质低成本的3D和2D数字人。
随着多媒体与AI技术的深度结合,快手持续深耕AI技术,推动产品形态、用户体验发展,探索短视频业务的第二曲线。于冰认为,AI大模型作为当下最重要的革命性技术,进入爆发期,有望开启AGI时代,而多模态内容生成与理解是其核心能力。
当前,多模态AI大模型因其在文本、代码、图像和视频等多种内容上突出的生成与理解能力,有望为视频生产、理解、分发、消费等全链路打开新的技术视角,突破传统音视频编码的技术天花板,突破基于用户行为的搜广推算法的传统思路,将视频内容创作从PGC、UGC带动进入AIGC时代,创造AI大模型驱动的视频内容创作工具,激发创作者的创意空间,高效率、低成本地生产高质量的视频内容。
而短视频、直播作为最典型的多模态媒介,快手也抓住平台基因,在AI大模型领域重度投入,全方位探索技术突破。于冰介绍,目前,快手在AI大模型的布局体系分为三个层级:基于具备高性能、高并发、高算力的“大基建”,构建快手多模态的AI“大模型”,进而在搜广推、内容创作、用户增长、研发效能等领域内打造“大应用”。
例如在搜广推领域,快手搜广推算法已达到国际领先水平,相关成果获得信息检索与数据挖掘领域国际顶级学术会议CIKMBestPaper、SIGIRBestPaper-HonorableMention等荣誉,目前快手突破传统基于用户行为的技术思路,探索更深层次的模型网络,开拓推荐模型,利用内容生成与理解来探索深层次用户兴趣的新路径。
同时,在多模态AI大模型的加持下,AI技术和工具可全方位地赋能影视创作者,助其在创作、拍摄、后期等各阶段激发创意、提升效率和内容质量,影视制作的周期也能大幅提高,过去花费数年拍摄的大片有望数月完成。
技术发展从萌芽到成熟,不仅仅靠企业自研,也需要高校科研机构的人才赋能。此前,快手先后与清华大学、中国科学技术大学北京研究院、中国人民大学建立联合科研机构,与全球顶尖高校、实验室建立科研合作,共同探索音视频、多媒体和AI领域的前沿技术,联合培养科研人才。
“学术界有顶尖的技术和优秀的科研人才,工业界则具备真实的应用场景,拥有海量数据和大算力的优势,两者深度合作、双向赋能,其价值将成倍放大。”于冰表示,一方面,技术的突破将在互联网业务中得到规模化使用,产生巨大的经济效益和社会效益;另一方面,互联网真实的场景、海量的数据、强大的算力,也能助力科研技术不断迭代。未来,快手将持续促进产学研生态完善,向学术界开放场景、数据和算力,共同探索AGI时代智能媒体新技术,以技术赋能行业创新与发展。
云南网记者刘畅
标签:
- 快手出席中国多媒体大会:产学研合作共赢,迎接AGI时代新机遇
- 云南电信加速布局“云网智算”,助力新基建驶入快车道
- 丁险峰:地产和物业在科技上潜力无穷大 | 博鳌快讯
- 星辉吧(星辉斑斓)
- 甘肃酒泉继续发布高温橙色预警
- 科学家发现火星自转正以每年 4 毫角秒的速度加快,白昼略微缩短
- 【环球财经】新加坡股市8日微涨0.12%
- 韩国现代汽车将在印度推出更多电动汽车
- 日媒爆料:核污染水何时开始排海?
- 十年“深水区”探索:华为首次揭秘七大运动健康最新黑科技
- 闭幕之际 国际大体联代理主席雷诺·艾德盛赞成都大运会
- 侃股:千亿ETF基金映射衍生品市场繁荣
- 查理·芒格的投资之道:用做生意的方法做投资
- 印度农产区降雨不均或导致糖产量下降 市场担忧糖出口遭限制
- 印度7月燃料需求同比增长1.9% 环比下降6.6%
- 中国外运股份有限公司副总经理、总法律顾问田雷辞职
- 演唱会一票难求,“黄牛票”能买吗?
- 同事真的倒大霉了碰上你
- 又一省级农商联合银行获批筹建!
- 一周协助查获4起走私案!云南这只警犬“出圈”
- 【云视角】强降雨“转战”南方 云南这些地方需警惕
- 中国驻智利使馆提醒中国公民警惕“廉价机票”骗局
- 日均人流量4万余人次 这个地方如何守护?
- 德国7月通胀率为6.2%
- 江苏省住建厅通报:镇江丹阳一工地发生起重机械伤害生产安全事故 致2人死亡
- 工资追不上物价!日本实际工资连续15个月下降
- 台风“卡努”向日本九州岛靠近 未来或影响韩国全境
- 一图读懂 | 工业和信息化部部署APP备案工作
- 益阳赫山:大作家现场点评乡土文学“小作品”
- 科源制药08月08日涨停分析
- 雷龙科技完成数千万B轮融资
- 雷暴天气来袭!美东近万次航班取消或延误 公共设施关闭
- 悄咪咪发现,张小斐的家乡,撑起了东北美食的一片天
- 昭通巧家:擦亮白鹤滩水电站库区生态底色
- 巴基斯坦将从邻国伊朗购买更多电力
- 极端高温助选?拜登前往美国“火炉”拉票
- 突发!云南芒市一村寨发生山体滑坡灾害 致2死1伤
- 昭通市向老挝川圹省援助体育物资
- “最美儿童督导员”张晓兰: 用爱播撒希望的种子
- 视频 | 浓烟滚滚 他冲进火场拎出煤气罐
- 广东省农科院与汕尾市海丰县签订科技合作框架协议
- 川大智胜(002253)8月8日主力资金净卖出320.78万元
- 澳柯玛全新内嵌冷柜上市
- 北京的自来水变凉了?官方:系加大了本地密云水库取水量
- 新疆阿勒泰成为跨境旅游的新出口
- 半岛叨叨丨就在明天,青岛将迎来……这些“秋色”,太值得晒一晒了
- 英媒:欧洲企业因俄乌冲突损失1000亿欧元
- 定投时间长了是不是一定赚 要怎么做才能赚
- 昆明呈贡区龙岭社区有本“实事账” 件件都是群众“心头事”
- 【环球财经】东京股市微幅上涨 日经225指数上涨0.38%
- 8月8日海泰科涨停分析:汽车零部件,新能源车零部件,新能源汽车概念热股
- 云南德宏首所“少年警校”揭牌成立
- 波兰石油管道运营公司:已修复受损的“友谊”输油管道
- 基金分红是赚了吗 分红怎么选择
- 德国核聚变初创企业与美国大学合作建造激光设备
- 什么叫环比 什么叫同比
- 投资基金有哪些优点 如何购买基金
- 日本家庭消费连续4个月同比下滑
- 台风“卡努”或将转向北上 东北救灾形势不容乐观
- 基金什么时候买入或者卖出较好 最佳买卖时机
- 贝宝宣布推出与美元挂钩的稳定币
- 艾森股份IPO募投项目遭质疑 壹健康 “绿瘦骗局”屡曝不止
- 特斯拉降价不管用了?
- 【文明城市咱的家】宝鸡:文艺轻骑兵进基层 唱响交通安全平安曲
- “熊出没”! 云南景东今年多地拍到黑熊影像
- A股房地产板块下挫 京投发展跌停、中迪投资跌9.76%
- 大理漾濞:严把严控 做好“三公”经费“减法”
- 多方联动助力云南高原特色荔枝产业现代化发展
- 定期存款到期后资金如何处理 是否需要重新选择定期存款
- 日本6月实际工资同比减少1.6% 连减15个月
- 海南省肿瘤医院采用神经阻滞疗法治疗偏头痛
- 50万存入建设银行一年期定期存款 提前支取需要扣除多少利息
- 大理漾濞:当好“四大员”助推法治政府建设开新局
- 可转债转股溢价率是什么 越高越好吗
- 理财有哪些手段 哪种风险低
- 昆明螺蛳湾精品区专业街餐饮整治行动举行
- 大额存单和定期存款有什么区别 应该如何选择
- 英国央行首席经济学家:食品价格可能无法从高位回落
- 日本财团拟要约收购东芝公司
- 获大量资金增仓,恒生医疗ETF(513060)逆市翻红,昨日份额增加超10亿份丨ETF观察
- 梅西加盟后球队未尝败绩 迈阿密国际再获7500万美元投资
- 【环球财经】日本上半年经常项目顺差同比增加
- 铝矿石商品报价动态(2023-08-08)
- 广东高校学子“三下乡” 齐绘多彩乡村图鉴
- 葡萄牙南部野火迫使约1400人预防性疏散
- 一加手机是哪里品牌 一加手机是哪个国家的品牌
- 微信平台治理“自媒体”涉灾情蹭热度炒作行为
- 美联储内部现分歧 国际金价震荡收跌
- 石家庄全力推进城市更新重点项目建设
- 一片网红向日葵催生7家乡村民宿
- 立秋了“贴秋膘”注意这6点
- 广告传媒业务范围(广告业务范围)
- 产后磁疗的作用及危害_磁疗的作用及危害
- 国际观察:美国对华“去风险化”本身是巨大风险
- 二季度险企偿付能力扫描:15家不达标,还有近20家未按时公布数据
- Redmi K60至尊版曝光:性能出色 5G手机
- 机构调查称英国房价连续第四个月下跌
- 平潭海关启用远程智能施封系统 大幅简化通关流程
- 湖北首届军事夏令营结营,小营员纷纷实现“变身”
- 亨通光电: 目前,公司400G光模块产品已在国内外市场获得小批量应用