文章 专题 AI工具 学习 下载 问答 源码 最近更新
PHP
会员中心 讲师中心 微信公众号
总结
豆包 AI 助手文章总结
下载豆包电脑版，提高工作效率
首页 > 科技周边 > 人工智能 > 正文

谷歌推出Mirasol：30亿参数，将多模态理解扩展至长视频

WBOY
发布： 2023-11-17 23:39:01
转载
1100人浏览过

谷歌推出Mirasol：30亿参数，将多模态理解扩展至长视频

11 月 16 日消息，谷歌公司近日发布新闻稿，介绍了小型人工智能模型 mirasol，可以回答有关视频的问题并创造新的记录。

谷歌推出Mirasol：30亿参数，将多模态理解扩展至长视频

AI 模型目前很难处理不同的数据流，如果要让 AI 理解视频，需要整合视频、音频和文本等不同模态的信息，这大大增加了难度。

谷歌和谷歌 Deepmind 的研究人员提出了新的方法，将多模态理解扩展到长视频领域。

借助Mirasol AI模型，该团队努力解决两个关键挑战：

  • 需要以高频采样同步视频和音频，但要异步处理标题和视频描述。
  • 视频和音频会生成大量数据，这会让模型的容量紧张。

在Mirasol中，谷歌采用了合路器和自回归转换器模型

该模型组件将处理时间同步的视频和音频信号，然后将视频拆分成独立的片段

转换器处理每个片段，并学习每个片段之间的联系，然后使用另一个转换器处理上下文文本，这两个组件交换有关其各自输入的信息。

一个新的转换模块名为Combiner，能够从每个片段中提取通用表示，并通过降维来压缩数据。每个片段包含4到64帧，该模型目前拥有30亿个参数，能够处理128到512帧的视频

谷歌推出Mirasol：30亿参数，将多模态理解扩展至长视频

在测试中，Mirasol3B 在视频问题分析方面达到了新的基准，体积明显更小，并且可以处理更长的视频。通过使用带有内存的组合器变体，该团队能够进一步降低所需的计算能力18%

谷歌推出Mirasol：30亿参数，将多模态理解扩展至长视频

谷歌推出Mirasol：30亿参数，将多模态理解扩展至长视频

谷歌推出Mirasol：30亿参数，将多模态理解扩展至长视频

谷歌推出Mirasol：30亿参数，将多模态理解扩展至长视频

谷歌推出Mirasol：30亿参数，将多模态理解扩展至长视频

本站在此附上 Mirasol 的官方新闻稿，感兴趣的用户可以深入阅读。

以上就是谷歌推出Mirasol：30亿参数，将多模态理解扩展至长视频的详细内容，更多请关注php中文网其它相关文章！

谷歌浏览器
谷歌浏览器

谷歌浏览器Google Chrome是一款可让您更快速、轻松且安全地使用网络的浏览器。Google Chrome的设计超级简洁，使用起来得心应手。这里提供了谷歌浏览器纯净安装包，有需要的小伙伴快来保存下载体验吧！

下载
相关标签：
谷歌 异步 人工智能
来源：51CTO.COM网
收藏 点赞
上一篇：腾讯云“AI超级底座”专场将亮相WOT大会，技术创新引领AI基础设施新篇章 下一篇：谷歌人工智能在快速、准确的天气预报方面击败了超级计算机
本文内容由网友自发贡献，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系admin@php.cn
作者最新文章
最新问题
快速上手通灵义码使用的实用方法​ 要快速上手通灵义码的使用，可以通过以下三个步骤：1.熟悉通灵义码的基本概念和结构，理解其结合了灵性和编码的特殊语言系统；2.掌握常用的编码和解码方法，学习其语法规则并通过冥想或静思理解符号背后的意涵；3.通过实践提高熟练度，从简单项目开始，将编码与灵性体验结合，逐步提升编码技能和精神状态。
2025-06-08 22:30:02
430
京东方“后视镜及具有其的车辆”专利获授权 天眼查信息显示，京东方科技集团股份有限公司近期获得了一项名为“后视镜及其车辆”的专利授权，该专利的授权公告号是CN112874440B，授权日期为2025年3月14日，而申请日期则是2021年4月6日。此发明公开了一种后视镜以及配备它的车辆。这种后视镜包含第一安装支架、第二安装支架、显示模块和防眩模块。第一安装支架内部设有一个第一安装腔体；第二安装支架则与第一安装支架的前方相连，其内部设有第二安装腔体，并且第二安装支架侧壁前端的宽度比第一安装支架侧壁前端的宽度要小。显示模块位于第一安装腔体内；防
2025-06-08 21:26:01
504
即梦ai怎样使用模板特效 即梦ai预设动画应用教程 即梦AI选择和应用模板特效与预设动画非常简单。1.打开软件，进入“模板库”或“动画库”，选择并应用模板或动画。2.调整元素如颜色、字体、动画参数等。3.利用关键帧编辑功能进行自定义，尝试不同组合以提升作品质量。
2025-06-08 21:12:01
636
通灵义码使用攻略教你高效操作步骤​ 通灵义码的基本编码规则是每个汉字通过四码或五码表示，分别对应汉字的不同部件或特征。提高输入速度需熟悉编码规则和增加练习量。使用过程中可能遇到编码冲突和记忆负担大等问题，可通过添加辅助码和分阶段学习解决。通灵义码适合快速上手的用户，但需更多记忆和练习。可以在电脑、手机和平板电脑上通过安装相应软件使用通灵义码。
2025-06-08 20:45:01
727
通灵义码使用技巧分享提高工作效率​ 通过通灵义码快速输入常用词汇的方法是熟悉常用代码。1.掌握常用词汇的快捷码，如“报告”用“bg”输入。2.忘记代码时迅速查阅备忘录。通灵义码在不同工作场景下的应用包括撰写邮件、数据分析和紧急项目处理，但不适合需要创意和灵感的写作。定制和优化通灵义码库的方法是1.根据工作需求添加专业术语和缩写。2.定期调整，去掉seldom用的代码，增加新词汇。3.使用视觉提醒帮助记忆。在团队协作中，通灵义码的应用效果是通过统一码库实现快速沟通和文档共享，但需注意成员的接受度和学习曲线。
2025-06-08 20:21:01
921
Meta 正就或超100亿美元的大规模 AI 投资谈判 Meta据报道正与人工智能初创企业ScaleAI就一项可能超过100亿美元的巨额投资进行深入谈判。据知情人士透露，这笔资金可能达到或超过100亿美元，这将使其成为历史上规模最大的私人公司融资案例之一。知情人士指出，由于谈判仍在进行中，具体条款仍有变数。根据公开记录，ScaleAI于2016年由华裔青年AlexWang创立，专注于为人工智能开发提供数据支持服务。据报道，AlexWang的双亲均从事物理学研究。他在青少年时期展现出卓越的数学和科学能力，并在就读麻省理工学院的第一年后决定退
2025-06-08 19:56:01
285
WSTS预计全球半导体市场规模同比增长11.2% 世界半导体贸易统计组织（WSTS）在其2025年春季市场预测报告中表示，预计全球半导体行业规模将在今年达到7009亿美元，较上一年增长11.2%。从具体分类来看，逻辑电路与存储芯片将是今年市场增长的主要驱动力，这两类产品的扩张得益于人工智能、云计算以及高端消费设备等领域旺盛的需求，预计增幅将超过两位数。此外，传感器和模拟芯片也会对整体业绩产生正面影响，不过其增速可能相对平缓一些。然而，WSTS也提到，在整个行业向好发展的背景下，仍有一些特定领域的业务可能会出现收缩，比如分离式元件、光电组件以及微
2025-06-08 19:04:01
248
比亚迪李云飞回应常压油箱争议：符合法规要求 比亚迪品牌公关部总经理李云飞于社交平台上发表言论指出，“中国在PHEV技术与标准方面处于全球领先地位，这一成就离不开众多国内汽车品牌在研发上的持续投入，以及它们对不同动力技术路径与排放合规策略的积极探索与实践。自2021年至2023年间，我们的产品采用了常压油箱的设计方案，且此方案完全符合相关法律法规的要求。”“针对那些长时间仅依赖纯电动模式行驶的PHEV车型，大约每七天左右会通过短暂启动发动机运行3至5分钟，以此来消耗掉碳罐中积累的燃油蒸气，确保排放达标。然而，有部分用户反映，这种定期启动发动
2025-06-08 18:40:02
710
国巨并购芝浦电子露曙光 陈泰铭：双方本月中协商 保证技术不外流 被动元件业龙头国巨是否能顺利收购日本的人工智能（AI）传感器厂商芝浦电子，近日成为市场热议的焦点。国巨董事长陈泰铭指出，国巨预计6月中旬与芝浦电子于东京展开潜在合作的商谈，同时承诺若收购达成，将保留芝浦电子的核心技术在日本本土。陈泰铭于6月7日受访时提到，让芝浦电子的技术流向被视为不友善区域的行为并不符合国巨的利益。他进一步表示：“我们将采取更为严密的技术管控措施，以防止技术外泄。”国巨方面提出的收购报价为每股6,200日元，这一价格高于竞争对手美蓓亚三美提出的每股5,500日元。陈泰铭还透露，
2025-06-08 17:36:01
138
英伟达首度推出NVLink Fusion 正式进入ASIC市场 英伟达首次推出NVLinkFusion，正式进军ASIC领域，与UALink联盟展开较量。英伟达首席执行官黄仁勋称，当前有90%的ASIC项目注定失败，但他相信英伟达的ASIC业务会比其他竞争对手发展得更快。联发科董事长蔡明介对ASIC芯片的未来市场前景持乐观态度，引用市场调研数据称，至2028年，面向云服务的ASIC芯片市场规模有望突破400亿美元。UALink联盟由阿里巴巴、亚马逊云科技（AWS）、AMD、苹果、谷歌、Meta、微软等大型云端AI芯片采购商创立，采用开放标准策略，与英伟达主导
2025-06-08 17:08:01
840
相关专题
更多>
豆包 AI 助手文章总结
下载豆包电脑版，提高工作效率
热门推荐
开源免费商场系统广告
热门教程
更多>
相关推荐
热门推荐
最新课程
最新下载
更多>
网站特效
网站源码
网站素材
前端模板
关于我们 免责申明 意见反馈 讲师合作 广告合作 最新更新
php中文网：公益在线php培训，帮助PHP学习者快速成长！
关注服务号 技术交流群
app下载
PHP中文网订阅号
每天精选资源文章推送
PHP中文网APP
随时随地碎片化学习
PHP中文网抖音号
发现有趣的

Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号

  • PHP学习

  • 技术支持

  • 返回顶部