苹果推出 300 亿参数 MM1 多模态 AI 大模型,拥有图像识别和自然语言推理能力

爱思助手下载 2025年12月11日

近日,苹果公司旗下研究团队在 ArXiv 中公布了一篇名为《MM1:Methods, Analysis & Insights from Multimodal LLM Pre-training》的论文,介绍了一款 “MM1”多模态大模型,该模型提供 30 亿、70 亿、300 亿三种参数规模,拥有图像识别和自然语言推理能力。


苹果推出 300 亿参数 MM1 多模态 AI 大模型,拥有图像识别和自然语言推理能力


苹果研究团队相关论文主要是利用 MM1 模型做实验,通过控制各种变量,找出影响模型效果的关键因素。研究表明,图像分辨率和图像标记数量对模型性能影响较大,视觉语言连接器对模型的影响较小,不同类型的预训练数据对模型的性能有不同的影响。

苹果推出 300 亿参数 MM1 多模态 AI 大模型,拥有图像识别和自然语言推理能力

苹果推出 300 亿参数 MM1 多模态 AI 大模型,拥有图像识别和自然语言推理能力


据介绍,研究团队首先在模型架构决策和预训练数据上进行小规模消融实验。之后利用混合专家(Mixture of Experts)架构及一种名为 Top-2 Gating 的方法构建了 MM1 模型,号称不仅在预训练指标中实现了最好的性能表现,在一系列已有多模态基准上监督微调后也能保持有竞争力的性能。


研究人员对“MM1”模型进行了测试,号称 MM1-3B-Chat 和 MM1-7B-Chat 优于市面上绝大多数相同规模的模型。MM1-3B-Chat 和 MM1-7B-Chat 在 VQAv2、TextVQA、ScienceQA、MMBench、MMMU 和 MathVista 中表现尤为突出,但是整体表现不如谷歌的 Gemini 和 OpenAI 的 GPT-4V。


苹果推出 300 亿参数 MM1 多模态 AI 大模型,拥有图像识别和自然语言推理能力


特别声明:本文版权归文章作者所有,仅代表作者观点,不代表爱思助手观点和立场。本文为第三方用户上传,仅用于学习和交流,不用于商业用途,如文中的内容、图片、音频、视频等存在第三方的知识产权,请及时联系我们删除。

如何手动降级爱思助手?

首先卸载当前版本,然后从第三方网站或备份中下载所需的旧版本安装包。安装时,确保选择正确的版本并按提示完成安装。

爱思助手屏蔽iOS更新后如何恢复更新通知?

要恢复iOS更新通知,可以重新连接你的设备至爱思助手,找到之前用于屏蔽更新的功能选项,并选择解除屏蔽。此外,重启设备或在设备的“设置”中手动检查更新也可以恢复更新通知。

如何登录爱思助手进行数据同步?

打开爱思助手并使用账户登录。连接设备后,选择“数据同步”功能,选择需要同步的数据类型,点击同步按钮即可。