设置
  • 日夜间
    随系统
    浅色
    深色
  • 主题色

人工智能研究者:从Token到“词元”,变化背后的分量很重

发布时间: 2026-03-30 09:40:04 来源:

  日前,在中国发展高层论坛2026年年会上,国家数据局局长刘烈宏明确将Token称为“词元”,并将它定义为“结算单位”。作为一名长期跟踪人工智能发展的研究人员,我一下子就捕捉到这个表述的变化。这个变化背后的分量很重。Oe8速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  它意味着,我国人工智能正在从“能力布局”迈向“能力结算”,从模型好不好,转向智能服务如何计量、如何定价、如何交易。过去,很多企业采购软件,买的是许可证、账号数和部署周期;如今,越来越多企业采购的,是可调用、可核算、可复盘的智能服务量。Oe8速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  词元,正是那个把智能服务折算成成本与价值的刻度。真正值得重视的,不只是一个译名,而是一个计量体系正在成形。Oe8速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  数据显示,2024年初,中国日均词元调用量为1000亿;到2025年底,跃升至100万亿;到2026年3月,已突破140万亿,两年增长超过1000倍。自2026年1月底以来,有的模型企业创下20天收入超过2025年全年总收入的业绩纪录。Oe8速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  短短两组数据,已经足以说明一个事实:词元不再只是技术指标,而正在成为人工智能商业化速度、应用深度和产业景气度的重要观测值。Oe8速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  中文语境下,给Token定名为“词元”,格外有意义。它比“词”更准确,也比“令牌”“标记”更贴近语言处理场景。特别是强调了“基础单元”这个属性,既方便公众理解,也有助于产业、媒体和政策口径统一。Oe8速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  但如果把2026年3月23日看成“词元”横空出世的时刻,也并不准确。事实上,Token并不是大模型爆红后才临时冒出来的新词。Oe8速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  往前追溯,在学理脉络上,它可追溯至20世纪初研究者提出的type-token区分,随后进入语言学、计算语言学和自然语言处理领域,成为文本处理的基础概念。在中文规范体系,2018年已有计算机学科术语规范工具书,将相关场景下的Token译为“词元”。Oe8速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  词元本质上是大模型处理信息的最小信息单元。人类说出一句话之后,模型要先把文本切分成词元,再把词元映射成编号,随后才能完成关联、推断和生成。Oe8速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  这也是为什么同样一句中文,在不同模型里,词元数量往往并不相同。切分规则不同,成本就不同,速度就不同,可容纳的上下文长度也会不同。Oe8速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  为何词元调用量快速攀升到140万亿?答案不是简单的“聊天变多了”,而是应用形态变了。对话应用消耗词元,长流程任务更消耗词元,调用工具、读取文档、连续规划、多轮反馈,同样都要反复吃进上下文、生成新输出。表面看,用户只是让模型“帮我做件事”,而系统内部,实际上是一次次高密度的信息拆分、调用和结算。Oe8速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  正如刘烈宏在同一场演讲中所说的:人工智能正从“对话”走向“决策执行”,智能体正在驱动中国大模型应用规模爆发式增长。Oe8速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  另一方面,词元调用增长越快,越说明数据供给体系正在跟上模型推理与应用消耗的节奏,也说明数据、模型、场景与商业闭环开始贯通,“词元经济”雏形正在显现,“数据供给—价值释放”的良性循环已初现端倪。Oe8速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  但词元多,并不自动等于智能强。Oe8速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  我在和企业交流时,常会碰到一种误解:是不是词元消耗得越多,模型就越聪明、答案就越好?Oe8速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  事实并非如此。词元更像水表和电表,负责记录消耗,不负责保证质量。真正决定结果的,仍然是模型能力、数据质量、任务设计和提示组织方式。Oe8速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  一句话:没有高质量数据,词元只是空转;没有合适场景,再便宜的词元也难以转化出真正的生产力。Oe8速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  词元像是一块很小的砖,却可能正在垫高一个时代的门槛。很多人第一次听见“词元”时,会觉得它抽象、陌生。但从此刻起,词元正像“字节”“流量”“千瓦时”那样,成为普通人必须逐步理解的新单位。这也意味着人工智能开始被纳入更成熟的经济叙事。Oe8速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

人工智能研究者:从Token到“词元”,变化背后的分量很重

  2025年8月28日,参展商与观展者在2025中国国际大数据产业博览会会场交流城市数智化实践情况。新华社记者陶亮 摄Oe8速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  我第一次强烈意识到词元的这种叙事改变,不是在实验室,而是在一张预算表前。Oe8速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  前段时间,我和几位企业负责人讨论大模型接入方案。大家谈完模型能力、幻觉率、知识库召回率,财务负责人忽然指着一行费用问我:为什么这套系统不是按账号数收费,也不是按调用次数收费,而是按“月度词元消耗量”核算?Oe8速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  那一刻,我意识到,词元已经像工业时代的度电、互联网时代的流量一样,成为企业理解人工智能时代“成本”的新度量衡。它不只服务于技术研发,也会越来越多地出现在预算表、采购单、报价单和监管语境里。Oe8速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  我们当然不能把一个时代的变化,全部压缩进一个术语里。但有些时候,一个术语的正式定名,恰恰标志着一个产业阶段已经悄然切换。今天的词元,也许就站在这样的节点上。Oe8速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  等到更多人读懂词元,人工智能的落地方式也会被重新理解。以后再听到“这个模型很费词元”“上下文又超了”“本月词元预算不够了”时,我们不妨少一点陌生感。这也在提醒我们:人工智能已经不只是在展示聪明,它正在像水、电、网络和云资源一样,被精确计量,被持续调度,被大规模交易。Oe8速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  真正变化的,也从来不只是一个中文名字。(作者系赛迪研究院人工智能研究中心副研究员钟新龙)Oe8速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  直播电商人才:是“野蛮生长”还是“学院派”培养  在2024年寒假来临之前,北京电子科技职业学院电子商务(京东定向培养)专业的学生,迎来了一次直播实操培训课。  整个教学安排持续了近两周。前4天,由合作企业的老   中新经纬2月18日电 广铁集团长沙火车站官方微博18日称,2024年2月18日4点24分,兰州开往广州的K225次列车到达长沙站,因列车上一些旅客未在票面到达站下车,继续乘车到前方站,造成列车超员。受其影响,部分正常购票旅客未能   春节假期武铁发送旅客511万人次  中新网武汉2月18日电 (记者 张芹)记者18日从中国铁路武汉局集团有限公司(以下简称“武铁”)获悉,2024年春节假期,武铁共发送旅客511万人次。1月26日至2月17日,武铁共发送旅客1273. 新华社济南2月22日电(记者陈国峰、张钟仁)连日来,山东多地迎来大风降温和雨雪天气。21日,受降雪影响,济南西站部分列车降速运行,出现晚点情况。售票大厅内,记者看到“晚点停运车次退票”窗口前排起长龙。国   中新经纬2月23日电 (周奕航)“和以往相比,今年的订单量足足翻了四五倍。”山东省菏泽市曹县的汉服加工厂老板陆平(化名)对中新经纬表示。  这个春节,马面裙火了。许多年轻人身穿马面裙,行走在大街小巷、灯展庙会间   实习期“双向侵权”如何破解?    劳动时间长,拿到的报酬却很微薄;实习岗位上受了伤,无法获得工伤赔偿……权益受侵害难维权,让职校生实习遭受到多方诟病。与此同时,用心培养后很难留住优秀实习生,付出的人力物力“竹 。

本文链接:人工智能研究者:从Token到“词元”,变化背后的分量很重http://www.sushuapos.com/show-5-96080-0.html

声明:本网站为非营利性网站,本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

上一篇: “龙虾”、Token怎么看?AI大咖们这样说

下一篇: 夜宵“顶流”小龙虾,竟是防治污染的利器?

热门资讯

推荐资讯

  • 2023年出境游相关新增企业同比增长近300%

      近日,据企查查数据显示,国内现存出境游相关企业12.18万家。近十年其注册量呈整体增长态势。2019年注册量达3.34万家,同比增长15.98%,达近十年注册量峰值。此后,受疫情等因素

  • 鄂尔多斯市首家智慧酒店开建,计划投资5亿

    据东胜商务微讯消息,近日,内蒙古自治区鄂尔多斯市首家智慧酒店——康泰智慧酒店在东胜区全面开工建设。该项目位于东胜区广场街南、科技街北、东环路东(汽车站南),占地面积17655.

  • 四川多个景区官宣免门票优惠政策

      “五一”假期即将到来。近期,四川多个景区官宣了“劳模”免票政策.    九寨沟景区  2024年5月1日至5月5日,对持有地市州及以上人民政府颁发的“劳动模范”证书、政

  • 格力电器2023年净利润290.17亿元,同比上涨18.41%

    4月29日,格力电器发布2023年全年业绩报告。2023年,格力电器实现营业收入2039.79亿元,同比上涨7.93%;归母净利润290.17亿元,同比上涨18.41%;基本每股收益5.22元。公告还披露,本次拟

  • 棕榈股份2024年一季度实现营收9.4亿元

      近日,棕榈股份发布2024年第一季度财报,财报显示,棕榈股份2024年第一季度营收约9.4亿元,同比增加8.26%;归属于上市公司股东的净利润亏损约1.03亿元;基本每股收益亏损0.06元;

  • 县域旅游:既有慢生活,也有性价比

    从携程等线上旅游平台发布的预定数据来看,今年“五一”期间的热门旅游县域中,既包括甘肃敦煌等历来较火的旅游目的地,也有江浙沪、京津冀等周边城市的

  • 自然资源部:继续大力保障保障性住房用地供应

      近日,据自然资源部消息,为适应房地产市场供求关系发生重大变化的新形势,支持盘活存量土地,促进房地产市场平稳健康发展,自然资源部下发通知,要求各地做好年度住宅用地供应计划

  • 美团:五一前三天上海本地生活服务消费位居全国城市第一

      近日,美团发布的五一假期“吃喝玩乐”消费数据显示,五一假期前三天,全国本地生活服务消费同比增长25%,全国餐饮堂食订单量较去年同期增长73%。其中,上海本地生活服务消费位居

  • 贵州格美荔波文旅演艺小镇项目签约

      近日,格美荔波文旅演艺小镇项目投资合作协议签约仪式在贵州省荔波县举行。签约仪式上,荔波县简要汇报项目前期工作开展情况,格美集团汇报文旅演艺小镇规划设计情况,并由双方

  • 三亚金都蔚景温德姆酒店拍卖,起拍价5.25亿元

    5月7日,据阿里资产拍卖网显示,三亚市天涯区南边海路113-2号三亚南海方舟旅游度假酒店(又名金都蔚景温德姆酒)将于6月11日公开拍卖,起拍价5.25亿元,评估价5.84亿元。据了解,金都蔚景

  • 万达酒店“五一”假期下沉市场表现亮眼,特色体验带动新消费

      今年“五一”小长假,再次接棒去年“五一”,成为“史上最热门五一”假期。据文化和旅游部数据中心测算,全国国内旅游出游合计2.95亿人次,同比增长7.6%,按可比口径较2019年同期

  • 义乌产业园区最大保租房项目拟于明年3月投运,可提供3838套房源

      5月7日消息,作为义乌产业园区配套集中建设体量最大的保障性租赁住房项目,义乌信息光电高新区人才社区正在加快建设中,主体工程处于收尾阶段,室内装修工程即将开始,计划于2025

  • 日榜
  • 周榜
  • 月榜