YutoGPT

苹果开源!Apple 7B 大模型,国内网友表示这很不苹果

AI 可引用摘要

苹果开源!Apple 7B 大模型,国内网友表示这很不苹果,Apple 7B 大模型,国内网友表示这很不苹果 大家好,我是G人工智能。苹果公司又又又整活了 苹果公司杀入开源大模型战场,完全开源了自己的AI大模型,属实狠角色了一把!

苹果开源!Apple 7B 大模型,国内网友表示这很不苹果

大家好,我是G人工智能。有很多新朋友无法第一时间看到每天的 AI 最前沿资讯,建议大家把本公众号加⭐星标置顶,以免错过每天的精彩干货!

苹果公司又又又整活了

苹果公司杀入开源大模型战场,完全开源了自己的AI大模型,属实狠角色了一把!对此,国内网友纷纷表示:这真的不像苹果的作风!

Apple 7B 完全开源

这次苹果推出的 7B 模型不仅在效果上与 Llama 3 8B 相当,而且完全开源了全部训练过程和资源,这在 AI 领域引起了很大的轰动。

要知道,不久前,Nature 杂志编辑 Elizabeth Gibney 还撰文批评,许多声称开源的 AI 模型,实际上在数据和训练方法上并不透明,无法满足真正的科学研究需求。而苹果这次来真的!

就连 NLP 科学家、AutoAWQ 创建者也感叹道:“Apple 发布了一个击败 Mistral 7B 的模型,但更棒的是他们完全开源了所有内容,包括预训练数据集!”

为什么这次开源意义重大?

有热心网友总结道,对于任何想要从头开始训练模型或微调现有模型的人来说,数据管理过程是必须研究的。苹果此次的开源举措无疑为研究人员提供了宝贵的资源。

苹果7B模型有多能打?

苹果的 7B 模型在开放数据集上使用 2.5T tokens 进行训练,主要是英文数据,拥有 2048 tokens 上下文窗口。数据集包括 DCLM-BASELINE、StarCoder 和 ProofPile2。

研究团队提出了一个新的语言模型数据基准 ——DCLM,从而提高模型性能,尤其是在多模态领域。

结果显示,DCLM-7B 模型在 MMLU 基准上 5-shot 准确率达 64%,可与 Mistral-7B-v0.3(63%)和 Llama 3 8B(66%)相媲美;并且在 53 个自然语言理解任务上的平均表现也可与 Llama 3 8B 相媲美,而所需计算量仅为后者的1/6。

GPT-4o mini 同样很能打

然后 OpenAI 突然发布了 GPT-4o mini,不仅能力接近 GPT-4,而且价格大幅下降。这个地址可以永久激活使用:https://hkyutong.cn

为什么大家都开始卷小模型?

以 GPT-4o mini 为代表的小模型整体比更大模型价格更低,对此,网友们纷纷表示,这个趋势确实值得关注。

数据可视化:开源模型性能对比

小模型实际应用案例

在自动驾驶方面,苹果7B模型通过多模态数据融合,提高了车辆识别和路径规划的准确性。

在智能家居领域,模型能够更精准地理解和执行用户的复杂指令;在语音助手方面,模型显著提升了语音识别和自然语言处理能力。

评论时刻

苹果这次的开源举措无疑为 AI 研究领域注入了新的活力。你对苹果的这次开源有什么看法?欢迎留言,在评论区分享你的观点!

扫码关注变量棱镜公众号