设置
  • 日夜间
    随系统
    浅色
    深色
  • 主题色

开源模型首胜GPT-4!竞技场最新战报引热议,Karpathy:这是我唯二信任的榜单

发布时间: 来源: 量子位

来自Transformer作者创业公司7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

能打得过GPT-4的开源模型出现了!7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

大模型竞技场最新战报:7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

1040亿参数开源模型Command R+攀升至第6位,与GPT-4-0314打成平手,超过了GPT-4-0613。7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

开源模型首胜GPT-4!竞技场最新战报引热议,Karpathy:这是我唯二信任的榜单

这也是第一个在大模型竞技场上击败GPT-4的开放权重模型。7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

大模型竞技场,可是大神Karpathy口中唯二信任的测试基准之一。7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

开源模型首胜GPT-4!竞技场最新战报引热议,Karpathy:这是我唯二信任的榜单

Command R+来自AI独角兽Cohere。这家大模型创业公司的联合创始人兼CEO,正是Transformer最年轻作者Aidan Gomez(简称割麦子)。7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

开源模型首胜GPT-4!竞技场最新战报引热议,Karpathy:这是我唯二信任的榜单

这份战报一出,又掀起了一波大模型社区的热烈讨论。7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

大家伙儿兴奋的理由很简单:基础大模型卷了一整年,没想到在2024年格局还在不断地发展变化。7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

HuggingFace联合创始人Thomas Wolf就说:7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

开源模型首胜GPT-4!竞技场最新战报引热议,Karpathy:这是我唯二信任的榜单

另外,Cohere机器学习总监Nils Reimers还指出了值得关注的一点:7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

Command R+最大的特色是对内置RAG(检索增强生成)进行了全面优化,而在大模型竞技场中,RAG这样的外挂能力并未纳入测试。7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

开源模型首胜GPT-4!竞技场最新战报引热议,Karpathy:这是我唯二信任的榜单

RAG优化模型登上开源王座

在Cohere官方定位中,Command R+是一个“RAG优化模型”。7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

就是说,这个1040亿参数的大模型主要针对检索增强生成技术进行了深度优化,以减少幻觉的产生,更适配于企业级工作负载7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

和此前推出的Command R一样,Command R+的上下文窗口长度是128k。7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

此外,Command R+还具备以下特点:7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  • 覆盖10+种语言,包括英语、中文、法语、德语等;
  • 能使用工具完成复杂业务流程的自动化

从测试结果来看,在多语种、RAG和工具使用这三个维度上,Command R+都达到了GPT-4 turbo的水平。7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

但在输入成本方面,Command R+的价格仅为GPT-4 turbo的1/3。7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

输出成本方面,Command R+则是GPT-4 turbo的1/2。7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

开源模型首胜GPT-4!竞技场最新战报引热议,Karpathy:这是我唯二信任的榜单

正是这点引发了不少网友的关注:7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

开源模型首胜GPT-4!竞技场最新战报引热议,Karpathy:这是我唯二信任的榜单

不过,尽管在大模型竞技场这种人类主观评测上表现抢眼,还是有网友甩出了一些不同观点。7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

在HumanEval上,Command R+的代码能力就连GPT-3.5都没打过,在两组测试中分别排在32位和33位。7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

最新版GPT-4 turbo则没有悬念地拿下了第一。7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

开源模型首胜GPT-4!竞技场最新战报引热议,Karpathy:这是我唯二信任的榜单

另外,我们也在最近刚登上正经论文的弱智吧benchmark上简单测试了一下Command R+的中文能力。7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

开源模型首胜GPT-4!竞技场最新战报引热议,Karpathy:这是我唯二信任的榜单

你给打个分?7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

需要说明的是,Command R+的开源只面向学术研究,并不能免费商用。7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

One More Thing

最后的最后,还是多聊一嘴割麦子小哥。7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

Aidan Gomez,Transformer圆桌骑士中最年轻的一位,加入研究团队时只是个本科生——7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

不过,是在多伦多大学读大三时就加入了Hinton实验室的那种。7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

2018年,割麦子被牛津大学录取,开始像他的论文搭子们那样攻读CS博士学位。7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

但在2019年,随着Cohere的创立,他最终选择退学加入AI创业的浪潮。7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

Cohere主要是为企业提供大模型解决方案,目前估值达到了22亿美元。7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

参考链接:
[1]https://twitter.com/lmsysorg/status/17776301337987727667cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM
[2]https://txt.cohere.com/command-r-plus-microsoft-azure/7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

— 完 —7cH速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

美国太平洋西北国家实验室的科学家设计了一种复合装饰材料,可以储存更多二氧化碳,提供了一种既符合建筑规范,又比标准复合饰面板便宜的“负碳”选择。研究人员于18日在美国化学会春季会议上公布 AI领域,一则重磅消息传来!最新消息,全球最知名的AI公司——OpenAI将在几个月内发布新版大型语言模型GPT-5,性能将有大幅跃升。目前,ChatGPT使用的是GPT-4大模型,去年3月份,正是这款热门聊天 美国《发现》杂志网站2月7日刊登题为《200万年前,我们的人类祖先开始从水里捞鱼》的文章,作者是科迪·科蒂尔,内容编译如下:捕鱼可能是一种占许多国家蛋白质消费极大比例的全球性行为,但捕 记者3月20日从中国科学技术大学获悉,该校郭光灿院士团队在量子态分辨研究中取得重要进展:他们在最小资源消耗的量子态分辨问题中首次提出了全局最优自适应策略,并发展了自适应集体测量实验技术, 近日,美国纽约州立大学石溪分校科学家菲格罗阿等人在一篇发表于《自然·量子信息》上的论文中称,他们通过把两个独立的光子存储在铷气里,首次在室温条件下构建了一个量子存储器网络。鉴于 据英国《每日电讯报》网站3月18日报道,根据英国政府的新航空计划,首批电动飞行出租车将于2026年试飞。周一发布的《“飞行未来”行动计划》为飞行出租车在2030年广泛使用铺平道路。尽管在最初 。

本文链接:开源模型首胜GPT-4!竞技场最新战报引热议,Karpathy:这是我唯二信任的榜单http://www.sushuapos.com/show-2-4735-0.html

声明:本网站为非营利性网站,本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

上一篇: 2019年全球云计算企业排行榜TOP50(2019年全球云计算企业排行榜TOP50)

下一篇: AI算力提高,高能耗和难散热问题如何突破?

热门资讯

推荐资讯

  • 日榜
  • 周榜
  • 月榜