开源多模态大模型黑马Molmo Al来袭!部分能力超越GPT-4o
创始人
2024-10-02 15:23:27
0

(来源:MIT TR)

非营利研究机构艾伦人工智能研究所(简称 Ai2)正在推出名为“Molmo”的开源多模态语言模型,据称该模型的性能可与 OpenAI、Google 和 Anthropic 的顶级专有模型相媲美。

该组织声称,其最大的 Molmo 模型拥有 720 亿个参数,在测量理解图像、图表和文档等内容的测试中,其性能优于 OpenAI 的 GPT-4o(GPT-4o 拥有超过一万亿个参数)。

与此同时,Ai2 表示,一个较小的 Molmo 模型(拥有 70 亿个参数),其性能接近 OpenAI 最先进的模型,这一成就主要归功于更高效的数据收集和训练方法。

Ai2 首席执行官 Ali Farhadi 表示,Molmo 表明,开源人工智能开发与封闭的专有模型不相上下。开源模型具有显著的优势,因为它们的开放性意味着其他人可以在其上构建应用程序。Molmo 演示可点击链接查看(https://molmo.allenai.org/),开发人员也可以在 Hugging Face 网站上对其进行修改。(最强大的 Molmo 模型的某些元素仍被屏蔽。)

其他大型多模态语言模型是在包含从互联网上获取的数十亿图像和文本样本的庞大数据集上进行训练的,并且它们可以包含数万亿个参数。Ai2 的高级研究主管 Ani Kembhavi 表示,这个过程给训练数据带来了很多噪音,并随之产生了幻觉。相比之下,Ai2 的 Molmo 模型是在一个更小、更“精心策划”的数据集上进行训练的,该数据集仅包含 60 万张图像,并且具有 10 亿到 720 亿个参数。Kembhavi 表示,这种对高质量数据的关注,而不是不加区别地抓取数据,用更少的资源实现了更好的性能。

Ai2 通过让人类注释者在多页文本上以极其详细的方式描述模型训练数据集中的图像来实现这一目标。他们要求注释者谈论他们所看到的内容,而不是打字。然后,他们使用人工智能技术将语音转换为数据,这使得训练过程更快,同时降低了算力需求。

如果我们想要有效地管理用于人工智能开发的数据,这些技术可能会非常有用。Hugging Face 的机器学习和社会负责人 Yacine Jernite 表示,他没有参与这项研究。

斯坦福大学基础模型研究中心主任 Percy Liang 也没有参与这项研究,他说:“一般来说,用更高质量的数据进行训练可以降低计算成本,这是有道理的。”

另一个令人印象深刻的能力是,该模型可以“指向”图像相关部分,这意味着它可以通过识别回答查询的像素来分析图像的元素。

在与《麻省理工科技评论》分享的演示中,Ai2 研究人员在西雅图的办公室外拍了一张照片,并要求模型识别图像中的各种元素,例如躺椅。该模型成功地描述了图像中包含的内容,计算了躺椅的数量,并按照研究人员的要求准确地指出了图像中的其他事物。然而,它也并不完美。比如它无法找到特定的停车场。

Farhadi 说,其他先进的人工智能模型擅长描述场景和图像。但是,当您想要构建更复杂的智能体,可以与世界交互,例如预订航班时,这还不够。他说,“指向”可以让人们与用户界面进行交互。

Jernite 表示,与我们在其他人工智能公司看到的相比,Ai2 的运营更加开放。他说,虽然 Molmo 是一个良好的开端,但它的真正意义在于开发人员在其基础上构建的应用程序,以及人们改进它的方式。

Farhadi 对此表示同意。过去几年,人工智能公司吸引了数万亿美元的巨额投资。但在过去的几个月里,投资者对这项投资能否带来回报表示怀疑。他认为,大型、昂贵的专有模型无法做到这一点,但开源模型可以。他说,这项工作表明,开源人工智能也可以以有效利用资金和时间的方式构建。

“我们很高兴能为其他人提供支持,并看看其他人会用它来构建什么。”Farhadi 说。

原文链接:

https://www.technologyreview.com/2024/09/25/1104465/a-tiny-new-open-source-ai-model-performs-as-well-as-powerful-big-ones/

相关内容

思特奇:悠然无界大模型推动...
证券之星消息,思特奇(300608)10月13日在投资者关系平台上...
2025-10-14 21:19:45
中国AI技术“破解”160...
中国人工智能技术的发展正在越来越多地挖掘一些此前无法“探知的世界”...
2025-10-14 20:45:54
大模型的尽头是开源
文| 零态LT 大模型的战争,正悄然换牌。 闭源一度是顶尖玩家的...
2025-10-14 18:14:20
新安洁新设环境科技公司 含...
人民财讯10月14日电,企查查APP显示,近日,菏泽市毅信安洁环境...
2025-10-14 17:47:08
腾讯开源通用文本表示模型Y...
钛媒体App 10月14日消息,腾讯优图实验室正式开源Youtu-...
2025-10-14 17:44:27
破局“开源糖衣”与“管制枷...
曾几何时,美国软件厂商带着"开源共享"的甜糖敲门,不少人以为捡到了...
2025-10-14 16:46:47

热门资讯

原创 2... #春日生活好物种草季#近年来,笔记本电脑市场迎来技术爆发期,尤其在手机厂商跨界入局后,轻薄本在性能、...
AMD锐龙AI 9 HX 37... 2024年6月3日,AMD正式发布全新的锐龙AI 300系列处理器。该系列处理器一经发布就引发大家的...
5个AI模特生成软件推荐 当前AI模特生成软件市场提供了多样化的解决方案,以下是几款备受推崇的工具: 触站AI:强烈推荐!...
骁龙本这么猛?联想YOGA A... 在人人都是自媒体的时代,一部手机可以解决出镜拍摄问题,而商务出差、大量码字、图像处理等需求用笔记本则...
2023年CentOS与Ubu... CentOS与Ubuntu的市场格局与技术特性探讨 在服务器操作系统领域,CentOS与Ubuntu...
苹果macOS 15.1:允许... 苹果公司在其最新的macOS 15.1版本中,推出了一项引人注目的新功能——允许用户将Mac App...
原创 苹... 前言 IQUNIX在做好看的桌面产品上,一直都给我留下非常深刻的印象。而且早期和苹果产品的设计风格...
原创 华... 想在竞争残酷的市场中发力,必须要带来一些激进的卖点,但是随着功能特性的提升,硬件也必须要进行给力才可...
原创 华... 在2024年这个被誉为"AI元年"的关键时刻,随着生成式AI的流行,各家手机厂商都在积极备战AI手机...