7月19日消息, OpenAI宣布推出GPT-4o mini模型,并称其为最具成本效益的小型模型。GPT-4o mini 可以替代 GPT-3.5 Turbo,对标的是 Claude 3 Haiku 和 Gemini 1.5 Flash, OpenAI预计GPT-4o mini更加经济实惠,将能显著扩大使用人工智能构建的应用范围。
据悉,GPT-4o mini在MMLU上的得分为82%,目前在 LMSYS 排行榜的聊天方面分数优于 GPT-4。
GPT-4o mini 的商用价格是每百万输入 token 15 美分,每百万输出 token 60 美分,比GPT-3.5 Turbo便宜60%以上。
GPT-4o-mini在API(应用程序编程接口)中支持文本和视觉,并在未来支持文本、图像、视频和音频输入和输出。该模型具有 128K token 的上下文窗口,知识截至 2023 年 10 月。得益于与 GPT-4o 共享的改进版 tokenizer,处理非英语文本能力也更加经济高效。
具有卓越文本智能和多模态推理的小型模型
GPT-4o mini在文本智能和多模式推理的学术基准上超越了GPT-3.5 Turbo和其他小型模型,并支持与GPT-4o相同的语言范围。
GPT-4o mini还展示了函数调用的强大性能,这使开发人员能够构建获取数据或与外部系统进行操作的应用程序,与GPT-3.5 Turbo相比,它还提高了长上下文性能。
GPT-4o mini已经在多个关键基准测试中进行了评估:
推理任务:GPT-4o mini在涉及文本和视觉的推理任务中优于其他小型模型,在文本智能和推理基准MMLU上的得分为82.0%,而Gemini Flash的得分为77.9%,Claude Haiku的得分为73.8%。
数学和编码能力:GPT-4o mini在数学推理和编码任务方面表现出色,优于市场上其他小型模型。在测量数学推理的MGSM上,GPT-4o mini的得分为87.0%,而Gemini Flash的得分为75.5%,Claude Haiku的得分为71.7%。
GPT-4o mini在衡量编码性能的HumanEval上的得分为87.2%,而Gemini Flash的得分为71.5%,Claude Haiku的得分为75.9%。
多模态推理:GPT-4o mini在多模态推理评估MMMU上也表现出色,得分为59.4%,而Gemini Flash和Claude Haiku的得分分别为56.1%和50.2%。
安全性方面,GPT-4o mini 内置了与 GPT-4o 相同的安全缓解措施,OpenAI 根据 Preparedness Framework 和自愿承诺,通过自动和人工评估对其进行了仔细评估。70 多名社会心理学和错误信息等领域的外部专家对 GPT-4o 进行了测试,以确定潜在风险,这些问题的解决方法会在即将发布的 GPT-4o system card 和 Preparedness 记分卡中分享。这些专家评估得出的见解有助于提高 GPT-4o 和 GPT-4o mini 的安全性。
可用性和定价
GPT-4o-mini现在可以作为文本和视觉模型在 Assistant API、Chat Completions API 和 Batch API 中使用。开发人员每 100 万输入 token 价格为 15 美分,每 100 万输出 token(大约相当于一本标准书的 2500 页)价格为 60 美分。
OpenAI 计划在未来几天推出GPT-4o mini的微调版。
从今天开始,在ChatGPT中,Free、Plus和Team用户能够访问GPT-4o mini,以代替取代 GPT-3.5 Turbo。
企业用户将从下周开始获得访问权限。
OpenAI 表示,在过去的几年里见证了人工智能的显著进步,同时成本大幅降低。例如,自 2022 年 OpenAI 推出功能较弱的模型 text-davinci-003 ,至如今的 GPT-4o mini ,每个 token 成本已下降了 99%。OpenAI 致力于继续降低成本,同时增强模型功能。人工智能正变得越来越容易获得、可靠,并嵌入我们的日常数字体验中。
(免责声明:本网站内容主要来自原创、合作伙伴供稿和第三方自媒体作者投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。
任何单位或个人认为本网站中的网页或链接内容可能涉嫌侵犯其知识产权或存在不实内容时,应及时向本网站提出书面权利通知或不实情况说明,并提供身份证明、权属证明及详细侵权或不实情况证明。本网站在收到上述法律文件后,将会依法尽快联系相关文章源头核实,沟通删除相关内容或断开相关链接。 )