OpenAI头号竞争对手:大模型训练成本最多三年将升至百亿美元
澎湃新闻记者 胡含嫣
AI初创企业Anthropic的CEO称百亿美元量级AI(人工智能)模型的训练可能在明年开始。
近日,Anthropic的CEO兼总裁达里奥・阿莫代(Dario Amodei)在播客节目In Good Company中表示,目前公司正在开发的AI模型训练成本高达10亿美元,他预计,AI模型的训练成本将在2027年之前提升到100亿美元,甚至是1000亿美元。
被视为OpenAI头号竞争对手的Anthropic由一群OpenAI前员工创立。阿莫代在OpenAI工作了五年,在离开时,他已经做到了OpenAI副总裁的位置。Anthropic旗下最知名的模型是在2023年3月发布的Claude模型,今年3月,Claude 3系列正式发布。
在采访中,阿莫代谈到了自己对于AGI(通用人工智能)的看法,称自己不认为AGI会在某一个时间点突然出现,而是会以循序渐进的方式逐渐现身:“我认为,这就像一个能够学习和成长的人类孩子一样,他们会变得越来越好、越来越聪明,知识越来越丰富。”
为了让模型越变越好,就需要越来越多的资金投入。据报道,GPT-4o的训练“仅”花费了不到1亿美元,谷歌Gemini Ultra模型的训练成本则为1.91亿美元。阿莫代预计,100亿美元量级模型的训练可能会在2025年的某个时候开始,一个充满活力的下游生态系统也会随之出现。目前,公司已经筹集了超过80亿美元的资金。
阿莫代指出,模型推出的速度和模型的成本与质量之间存在一定关系,可以把它想象成一条“权衡曲线”。公司正在努力推动这条曲线“向外移动”,以同时实现模型的快速推出、高质量和低成本:“曲线在变化,我们可以用更少的资源做更多的事情,也可以用更多的资源做更多的事情。我认为这两种趋势是共同存在的。”
当主持人问到“谁会在AI上赚最多的钱”时,阿莫代认为,尽管有先后顺序,所有人都会分得一杯羹:“蛋糕会变得很大。就像现在,芯片公司肯定赚得最多,我认为这是因为模型的训练先于模型的部署,而模型的部署先于其收入。所以我认为,芯片公司的估值是一个先行指标,AI公司的估值可能是一个当前指标,而下游很多东西的估值是滞后指标,但这股浪潮将影响到每个人。”
随后,阿莫代也谈到了AI芯片龙头英伟达。面对越来越激烈的竞争,英伟达将产品发布间隔从隔一年发布大幅缩短至每年发布一次,今年市值已涨到三万亿美元以上。阿莫代指出,为了构建AI集群,包括Anthropic在内的AI企业正在为英伟达的芯片支付大笔金额;虽然尚未看到AI产生的大量收入、依然存在泡沫破灭的可能,但Anthropic选择继续押注看涨。
目前,以GPU为主的硬件需求仍是决定AI训练成本的一大因素。今年6月,红杉资本分析师David Cahn表示,AI行业每年需要为数据中心等基础设施支付6000亿美元的费用。在过去的采访中,阿莫代曾提到,有足够资金来训练专业等级AI模型的公司依然不多。
今年6月,Anthropic发布了旗下性能最强的AI模型Claude 3.5 Sonnet,称其为“迄今为止最智能的模型”。据介绍,在覆盖阅读、编程、数学和视觉等领域的多项性能测试中,Claude 3.5 Sonnet的性能基本全面超越了包括GPT-4o在内的一众知名AI模型,仅在MMLU(大规模多任务语言理解)和MATH(数理)数据集上略逊于GPT-4o,且优于自家此前最强的模型Claude 3 Opus。
中新经纬1月11日电 据高检网11日消息,国家开发银行原党委委员、副行长王用生涉嫌受贿一案,由国家监察委员会调查终结,移送检察机关审查起诉。日前,经最高人民检察院指定管辖,吉林省人民检察院依法以涉嫌受贿罪对王用生 农工党中央召开两会情况通报会农工党中央拟向全国政协十四届二次会议提交34件中央提案、26件界别小组提案中国改革报、中国发展网记者田新元2月20日,在全国两会即将召开之际,农工党中央在京召开中央和 中国经济导报、中国发展网讯 记者王晓涛报道 2月22日,普华永道发布了2023年下半年中国科技、媒体及通信行业(TMT)企业首次公开募股(IPO)数据。2023年下半年,全球资本市场发展趋缓,内地TMT企业上市数量及融 新华社记者周义在福建省莆田市,“无忧电工”培训班的出现,为当地残障人士拓宽了就业渠道。“兼职电工,我的月收入平均增加1000多元。”通过培训获得电工证的第二批“无忧电工”梁志忠说话间难掩喜悦之情 2023年能源投资保持快速增长(新数据 新看点) 新能源完成投资额同比增长超34% 本报北京2月22日电 (记者丁怡婷)记者近日从国家能源局获悉:2023年,我国能源投资保持快速增长,据监测,全国在建和年内拟开工能源重点 京津冀以就业服务协同激发区域就业新活力 中新网北京2月22日电 (记者 杜燕)在京津冀协同发展战略实施十周年之际,京津冀三地人社部门22日在北京城市副中心三大建筑之一――北京城市图书馆联合举办“京津冀人社 。本文链接:OpenAI头号竞争对手:大模型训练成本最多三年将升至百亿美元http://www.sushuapos.com/show-5-21163-0.html
声明:本网站为非营利性网站,本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。
上一篇: 同济堂控股被强制执行近8亿元