开源模子首胜gpt

李悦 2024-04-11 01:57 647

"开源模子首胜gpt,这篇新闻报道详尽，内容丰富，非常值得一读。这篇报道的内容很有深度，让人看了之后有很多的感悟。作者对于这个话题做了深入的调查和研究，呈现了很多有价值的信息。 " 账号设置我的关注我的收藏申请的报道退出登录登录搜索36氪Auto数字时氪将来消费智能涌现将来城市启动Power on36氪出海36氪研究院潮生TIDE36氪企服点评36氪财经(Finance)职场bonus36碳后浪研究所暗涌Waves硬氪媒体品牌企业号企服点评36Kr研究院36Kr创新咨询企业服务核心服务城市之窗行政部门服务创投发布LP源计划VClubVClub投资机构库投资机构职位推介投资人认证投资人服务寻求报道36氪Pro创投氪堂企业入驻创业者服务创投平台首页快讯资讯推荐财经(Finance)科技(Technology)企服城市最新创投汽车(Car)AI创新直播视频专题活动搜索寻求报道我要入驻城市合作开源模型首胜GPT-4，竞技场最新战报引热议，Karpathy：这是我唯二信任的榜单量子位·2024-04-10 15:44关注来自Transformer作者创业公司

能打得过GPT-4的开源模型出现了！

大模型竞技场最新战报：

1040亿参数开源模型Command R+攀升至第6位，与GPT-4-0314打成平手，超过了GPT-4-0613。

这也是第一个在大模型竞技场上击败GPT-4的开放权重模型。

大模型竞技场，可是大神Karpathy口中唯二信任的测试基准之一。

Command R+来自AI独角兽Cohere。这家大模型创业公司的联合创始人兼CEO，正是Transformer最年轻作者Aidan Gomez（简称割麦子）。

这份战报一出，又掀起了一波大模型社区的热烈讨论(Discuss)。

大家伙儿兴奋(Excited)的理由很简单：基础大模型卷了一整年，没想到在2024年格局还在不断地发展变化。

HuggingFace联合创始人Thomas Wolf就说：

最近大模型竞技场上的情况发生了巨大的变化：

Anthropic的Claude 3 opus在闭源模型中独占鳌头。

Cohere的Command R+则成为了开源模型中的最强者。

没想到，2024年在开源和闭源两条路线上，人工智能团队的发展都如此之快。

另外，Cohere机器学习总监Nils Reimers还指出了值得关注的一点：

Command R+最大的特色是对内置RAG（检索增强生成）进行(Carry Out)了全面优化，而在大模型竞技场中，RAG这样的外挂能力并未纳入测试。

RAG优化模型登上开源王座

在Cohere官方定位中，Command R+是一个“RAG优化模型”。

就是说，这个1040亿参数的大模型主要针对检索增强生成技术进行(Carry Out)了深度优化，以减少幻觉的产生，更适配于企业级工作负载。

和此前推出的Command R一样，Command R+的上下文窗口长度是128k。

此外，Command R+还具备以下特点：

覆盖10+种语言，包括英语、中文、法语、德语等；

能使用工具完成复杂业务流程的自动化

从测试结果(Result)来看，在多语种、RAG和工具使用这三个维度上，Command R+都达到了GPT-4 turbo的水平。

但在输入成本方面，Command R+的价格仅为GPT-4 turbo的1/3。

输出成本方面，Command R+则是GPT-4 turbo的1/2。

正是这点引发了不少网友的关注：

不过，尽管在大模型竞技场这种人类主观评测上表现抢眼，还是有网友甩出了一些不同观点。

在HumanEval上，Command R+的代码能力就连GPT-3.5都没打过，在两组测试中分别排在32位和33位。

最新版GPT-4 turbo则没有悬念地拿下了第一。

另外，我们(We)也在最近刚登上正经论文的弱智吧benchmark上简单测试了一下Command R+的中文能力。

你给打个分？

需要说明的是，Command R+的开源只面向学术研究，并不能免费商用。

One More Thing

最后的最后，还是多聊一嘴割麦子小哥。

Aidan Gomez，Transformer圆桌骑士中最年轻的一位，加入研究团队时只是个本科生——

不过，是在多伦多大学(University)读大三时就加入了Hinton实验室的那种。

2018年，割麦子被牛津大学(University)录取，开始像他的论文搭子们那样攻读CS博士学位。

但在2019年，随着Cohere的创立，他最终选择退学加入AI创业的浪潮。

Cohere主要是为企业提供大模型解决方案，目前(Currently)估值达到了22亿美元。

参考链接：

[1]https://twitter.com/lmsysorg/status/1777630133798772766

[2]https://txt.cohere.com/command-r-plus-microsoft-azure/

本文来自微信公众号“量子位”（ID:QbitAI），作者：鱼羊，36氪经授权发布。

该文观点仅代表作者本人，36氪平台仅提供信息存储空间服务。

+12

好文章，需要你的鼓励

量子位特邀作者1收藏+10评论打开微信“扫一扫”，打开网页后点击屏幕右上角分享按钮微博沉浸阅读返回顶部参与评论评论千万条，友善第一条登录后参与讨论(Discuss)提交评论0/1000你可能也喜欢这些文章离谱：AI超市「无人」收款，1000个印度人藏在背后……谷歌最强大模型免费开放了，长音频理解功能独一份，100万上下文敞开用在 2024 回顾 Windows Phone 的移动之梦CITE2024体坛：AI带动新需求，国产芯片、存储踏上风口AR+家电，会是将来流行组合吗？脑机接口的现实堪比科幻，我们(We)离电子永生还有多远新质生产力，点燃终端厂商的“办公”激情破解36年前魔咒，Meta推出反向训练大法消除大模型「逆转诅咒」亿航智能进入规模化量产，今年(This Year)内在广深等地推出“空中的士”最新文章推荐智能机器的来临意味着人类的终结吗？离谱：AI超市「无人」收款，1000个印度人藏在背后……谷歌最强大模型免费开放了，长音频理解功能独一份，100万上下文敞开用开源模型首胜GPT-4，竞技场最新战报引热议，Karpathy：这是我唯二信任的榜单对话“鹦鹉梨”：3场直播GMV破亿，UP主带货不能只做主播高瓴牵头，一举出手10亿造车新势力爆雷：员工集体举报销量造假骗融资，负债3亿已资不抵债英特尔突袭英伟达H100，新AI芯片训练快40%，推理快50%，CEO蹦迪庆祝在 2024 回顾 Windows Phone 的移动之梦金融圈高管年度薪酬曝光，有人10年翻10倍，降薪还能年入百万？

量子位特邀作者

作者有点忙，还没写简介

发表文章2135篇最近内容离谱：AI超市「无人」收款，1000个印度人藏在背后……14分钟前谷歌最强大模型免费开放了，长音频理解功能独一份，100万上下文敞开用14分钟前开源模型首胜GPT-4，竞技场最新战报引热议，Karpathy：这是我唯二信任的榜单15分钟前阅读更多内容，狠戳这里下一篇对话“鹦鹉梨”：3场直播GMV破亿，UP主带货不能只做主播

B站带货新顶流做对了什么？

16分钟前

热门标签泡泡英语福特t型车我国新型城镇化规划财务软件金蝶云企业平台沙滩车市场准入负面清单方辉云电脑(Computer)马路牙子长城皮卡坦途皮卡五十铃皮卡半衰期爱莉杨宁非虚构文学都市女孩李滨金融大数据蒋韬钢球防弹玻璃高中(High School)物理艾莎安娜闪聊品骏快递普萘洛尔ptsd关于36氪城市合作寻求报道我要入驻投资者关系商务合作关于我们(We)联系我们(We)加入我们(We)网站谣言信息举报入口热门推荐热门资讯热门产品文章标签快讯标签合作伙伴