GPT-5摊上大问题：烧了数亿美金后OpenAI发现牛吹早了
财联社12月23日讯(编辑 马兰)OpenAI的GPT项目一直是业界最为关注的话题，然而在该公司近期热火朝天的宣传之中，备受瞩目的GPT-5却消失无踪。
去年11月，OpenAI首席执行官奥尔特曼曾强调，不会在2024年推出任何名为GPT-5的模型。但知情人士透露，OpenAI最大投资者微软曾预期在2024年年中时看到该模型。
有人还称，距今为止，该项目已经筹备超过18个月，总体而言，这个代号为Orion的未来GPT-5模型的气氛已不太友好。该模型已经进行了至少两次大规模训练，每次训练都需要数月时间来处理大量数据，但每次训练后都会出现新的问题。
了解该项目的人士还指出，Orion目前充其量只比OpenAI的公开模型要好一些，距离该公司所谓的“重大飞跃”还很遥远，其也无法说服投资人投入目前的巨大成本。据估计，该模型为期六个月的训练仅在计算成本方面就“烧”了约5亿美元。
危险的是，OpenAI在10月的最新估值达到1570亿美元，受到了投资者的继续追捧，但分析人士指出这一估值很大程度上基于奥尔特曼的乐观预测，即GPT-5将在各类学科和任务上表现出博士水准，较目前GPT-4的高中生水平实现质的飞跃。
这意味着如果GPT-5不能在一个合理的时间内给出一个合理的亮相，那么OpenAI的繁荣可能将如泡沫般被刺破，成为反噬噩梦的开始。
数据“燃”尽
OpenAI原本的想法是，让GPT-5有能力解锁新的科学发现，并完成诸如预约或航班预定等类人类的决策行为，且其犯错的概率更小，或者至少对AI幻觉有所警惕。
但设想是设想，内部人士透露OpenAI的预期有些过于乐观，仅在数据问题上，GPT-5就面临着难以想象的挫折。
人工模型在训练过程中需要不断测试，可能持续很长一段时间。在此期间，模型将输入数万亿个单词片段，即所谓的token。而未来的人工智能模型吞噬token的数量将会是目前模型的十倍，甚至更多。
GPT-4的训练就使用了大约13万亿个token，按照一千人每天协5000个单词计算，这种规模的团队在几个月才能生产十亿个token，而其花费据奥尔特曼称超过1亿美元。
因此GPT-5模型的最关键问题在于：数据不足。此前的模型使用的是新闻文章、社交媒体贴文和科学论文，但研究人员透露，公共互联网上的数据已经不够，他们需要更多样且更高质量的数据，来让GPT-5变得更加强大。
难以调头
OpenAI目前的解决方案是从头开始创建数据，如招聘人员编写新的软件代码或解决数学问题，以供Orion学习。这些员工之中部分是软件工程师，部分是数学家，必要时他们还需要向Orion解释自己的工作。
还有一个方法是让现有的人工智能创造数据来训练Orion，比如OpenAI的o1。但研究人员又指出，用人工智能产出的数据喂给人工智能通常会引发故障或导致无意义的答案。
总之，在让Orion变成名副其实的GPT-5的道路上，OpenAI已经感到心累，在实现质的飞跃之前，人工智能先倒在了量的累积上。更无奈的是，OpenAI今年持续的人才流失加深了这一困境。
从首席科学家Ilya Sutskever到首席技术官Mira Murati再到上周四辞职的知名研究员Alec Radford，OpenAI的各路大神纷纷离巢，这为“难产”的GPT-5再添一层浓重的悲观色彩。
迟迟看不到结果的GPT-5也难免被OpenAI内部的商业化项目，如Sora，争夺走有限的计算资源。这同时也是一种警告，即Orion没有多少从头再来的机会，因为OpenAI已经明确了其想要盈利的雄心。
美国太平洋西北国家实验室的科学家设计了一种复合装饰材料，可以储存更多二氧化碳，提供了一种既符合建筑规范，又比标准复合饰面板便宜的“负碳”选择。研究人员于18日在美国化学会春季会议上公布 国际天文学家团队绘制了迄今最大的三维宇宙地图，记录了大约130万个活跃类星体在空间和时间上的位置。它将成为探测类星体、暗物质晕和超大质量黑洞的强大工具。发表在最新一期《天体物理学杂 近日，国家知识产权局等五部门联合印发了《专利产业化促进中小企业成长计划实施方案》（以下简称《实施方案》）。《实施方案》提出，到2025年底，中小企业知识产权意识和专利转化运用能力得到普遍提升 3月19日，记者从中国科学院海洋研究所了解到，该所研究团队在国际上首次发布了银鲳的高质量染色体水平参考基因组。相关研究论文近日在线发表于《自然》子刊《科学数据》。银鲳广泛分布于西北太 30台发动机助进阶版“鹊桥”升空 中新社西安3月20日电 (记者 张一辰)3月20日8时31分，长征八号遥三运载火箭在中国文昌航天发射场顺利升空，成功将“鹊桥二号”卫星送入预定轨道。作为公共中继星平台，“鹊桥二号” 3月23日消息，xiaomi集团王晓雁晒出了xiaomiCivi 4 Pro限定色真机照，该系列共有三款颜色，分别是蓝色、粉色和黑与白，定价为3599元，将于4月1日开始发售。据了解，xiaomiCivi 4 Pro限定色整体设计更像专业 。本文链接：GPT-5摊上大问题：烧了数亿美金后OpenAI发现牛吹早了http://www.sushuapos.com/show-2-9897-0.html
声明：本网站为非营利性网站，本网页内容由互联网博主自发贡献，不代表本站观点，本站不承担任何法律责任。天上不会到馅饼，请大家谨防诈骗！若有侵权等问题请及时与本网联系，我们将在第一时间删除处理。
上一篇： 借AI之势，深圳电子产品正在卖爆全球