火狐2019旧版下载

火狐2019旧版下载

新闻动态 你的位置:火狐2019旧版下载 > 新闻动态 > 字节跳动新模型提振机器视觉指数,暂未应用至产品端

字节跳动新模型提振机器视觉指数,暂未应用至产品端

发布日期:2025-04-18 10:16    点击次数:93

2月10日,字节跳动旗下豆包大模型团队发布视频生成实验模型“VideoWorld”,该模型由豆包大模型团队与北京交通大学、中国科学技术大学联合提出。不同于 Sora 、DALL-E 、Midjourney等主流多模态模型,VideoWorld在业界首次实现无需依赖语言模型即可认知世界。

受该消息影响,今日收盘,据Wind数据,机器视觉指数涨2.45%。成分股中,中光学涨停,格灵深瞳涨9.69%,宇瞳光学涨7.54%。

需注意的是,字节内部人士对记者表示,VideoWorld视觉模型属于学术研究项目,是在探索新的技术方法,目前并未应用至产品端。另外,尽管VideoWorld在围棋和模拟机器人操控环境中展现出较优性能,但在真实世界环境中的应用仍面临着高质量视频生成和多环境泛化等挑战。

据官方披露,为进行该视频模型研究,豆包团队构建了两个实验环境:视频围棋对战和视频机器人模拟操控。前者是因为围棋可以评估模型规则学习、推理和规划能力,且围棋关键信息仅有黑白两色及棋盘,可将外观、纹理等复杂细节与高级知识的评估分离。

同时,豆包团队还选取了机器人任务,以考察模型在理解控制规则和规划任务方面的能力。在模型训练环节,团队构建了一个包含大量视频演示数据的离线数据集,让模型“观看”学习,以此得到一个可以根据过往观测,预测未来画面的视频生成器。

经过一段时间的探索,豆包团队发现,视频序列的知识挖掘效率显著落后于文本形式,主要是因为视频中存在大量冗余信息,影响模型的学习效率。比如在学习棋子移动过程中,模型只需通过状态序列中少量位置标记编码,但面向视频数据,编码器则会产生过多冗余标记,不利于模型对复杂知识的快速学习,这也是VideoWorld模型诞生的背景,保留丰富视觉信息的同时,压缩关键决策和动作相关的视觉变化,实现更有效的视频学习。

VideoWorld并非字节发布的首款视频大模型。上周,字节跳动对外披露旗下一站式AI创作平台即梦AI将上线多模态视频生成模型OmniHuman,仅需一张图片与一段音频便可生成一条AI视频,该模型为字节自研闭源模型。此前,字节已发布文生视频大模型MagicVideo - V2、通用多模态大模型UniDoc等产品。

除了字节跳动,阿里、腾讯、快手等企业相继推出视频生成类产品,并披露在多模态领域布局。此前接受第一财经等媒体采访时,字节旗下火山引擎总裁谭待表示,企业做大模型是为了辅助人去做各种事情,需要语言、视觉等方面的完整能力,这就要求大模型具备多模态能力,才能端到端地帮助个人创业者与企业去解决具体问题。

中信证券研报分析称,头部厂商对于多模态大模型的开发继续呈现你追我赶的态势,军备竞赛仍然激烈。多模态大模型算法的突破将带来自动驾驶、机器人等技术的革命性进步。视频模态更符合C端用户的娱乐需求,尤其是与短视频业态有较高匹配度,因此更有希望催生高热度应用,但需要模型性能进一步成熟以及产品定义进一步摸索。

举报 第一财经广告合作,请点击这里此内容为第一财经原创,著作权归第一财经所有。未经第一财经书面授权,不得以任何方式加以使用,包括转载、摘编、复制或建立镜像。第一财经保留追究侵权者法律责任的权利。 如需获得授权请联系第一财经版权部:021-22002972或021-22002335;banquan@yicai.com。 文章作者

吕倩

相关阅读 深圳:到2026年人工智能终端产业规模达8000亿元以上

抢抓大模型开源化机遇,加快推出开箱即用训推一体机和推理一体机等产品,服务企业和政务领域定制化、轻量化需求。

47 03-03 13:30 香港推出首个人工智能大模型

香港生成式人工智能研发中心负责人介绍,这是业界首个基于DeepSeek全参数微调、并持续训练产生的大模型。

53 02-25 19:40 国产大模型如何赋能资产管理?资产管理机构数智技术研修班(iAMT)在沪举办

2月22日下午,“资产管理机构数智技术研修班(iAMT)——国产大模型在资产管理领域应用”在上海市虹口区工人文化宫圆满举办。

93 02-24 13:18 科技周报|马云现身阿里园区,tiktok重新在美上架

2月11日,有消息称,阿里巴巴创始人马云现身阿里巴巴园区。

167 02-16 11:13 速度又慢了?字节跳动全员会反思DeepSeek影响

对于DeepSeek的现象级热度,梁汝波如去年一般反思团队的反应速度问题。

501 02-14 22:19 一财最热 点击关闭

上一篇:没有了
下一篇:没有了