设置
  • 日夜间
    随系统
    浅色
    深色
  • 主题色

人工智能研究者:从Token到“词元”,变化背后的分量很重

发布时间: 2026-03-30 09:40:04 来源:

  日前,在中国发展高层论坛2026年年会上,国家数据局局长刘烈宏明确将Token称为“词元”,并将它定义为“结算单位”。作为一名长期跟踪人工智能发展的研究人员,我一下子就捕捉到这个表述的变化。这个变化背后的分量很重。nbe速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  它意味着,我国人工智能正在从“能力布局”迈向“能力结算”,从模型好不好,转向智能服务如何计量、如何定价、如何交易。过去,很多企业采购软件,买的是许可证、账号数和部署周期;如今,越来越多企业采购的,是可调用、可核算、可复盘的智能服务量。nbe速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  词元,正是那个把智能服务折算成成本与价值的刻度。真正值得重视的,不只是一个译名,而是一个计量体系正在成形。nbe速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  数据显示,2024年初,中国日均词元调用量为1000亿;到2025年底,跃升至100万亿;到2026年3月,已突破140万亿,两年增长超过1000倍。自2026年1月底以来,有的模型企业创下20天收入超过2025年全年总收入的业绩纪录。nbe速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  短短两组数据,已经足以说明一个事实:词元不再只是技术指标,而正在成为人工智能商业化速度、应用深度和产业景气度的重要观测值。nbe速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  中文语境下,给Token定名为“词元”,格外有意义。它比“词”更准确,也比“令牌”“标记”更贴近语言处理场景。特别是强调了“基础单元”这个属性,既方便公众理解,也有助于产业、媒体和政策口径统一。nbe速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  但如果把2026年3月23日看成“词元”横空出世的时刻,也并不准确。事实上,Token并不是大模型爆红后才临时冒出来的新词。nbe速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  往前追溯,在学理脉络上,它可追溯至20世纪初研究者提出的type-token区分,随后进入语言学、计算语言学和自然语言处理领域,成为文本处理的基础概念。在中文规范体系,2018年已有计算机学科术语规范工具书,将相关场景下的Token译为“词元”。nbe速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  词元本质上是大模型处理信息的最小信息单元。人类说出一句话之后,模型要先把文本切分成词元,再把词元映射成编号,随后才能完成关联、推断和生成。nbe速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  这也是为什么同样一句中文,在不同模型里,词元数量往往并不相同。切分规则不同,成本就不同,速度就不同,可容纳的上下文长度也会不同。nbe速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  为何词元调用量快速攀升到140万亿?答案不是简单的“聊天变多了”,而是应用形态变了。对话应用消耗词元,长流程任务更消耗词元,调用工具、读取文档、连续规划、多轮反馈,同样都要反复吃进上下文、生成新输出。表面看,用户只是让模型“帮我做件事”,而系统内部,实际上是一次次高密度的信息拆分、调用和结算。nbe速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  正如刘烈宏在同一场演讲中所说的:人工智能正从“对话”走向“决策执行”,智能体正在驱动中国大模型应用规模爆发式增长。nbe速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  另一方面,词元调用增长越快,越说明数据供给体系正在跟上模型推理与应用消耗的节奏,也说明数据、模型、场景与商业闭环开始贯通,“词元经济”雏形正在显现,“数据供给—价值释放”的良性循环已初现端倪。nbe速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  但词元多,并不自动等于智能强。nbe速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  我在和企业交流时,常会碰到一种误解:是不是词元消耗得越多,模型就越聪明、答案就越好?nbe速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  事实并非如此。词元更像水表和电表,负责记录消耗,不负责保证质量。真正决定结果的,仍然是模型能力、数据质量、任务设计和提示组织方式。nbe速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  一句话:没有高质量数据,词元只是空转;没有合适场景,再便宜的词元也难以转化出真正的生产力。nbe速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  词元像是一块很小的砖,却可能正在垫高一个时代的门槛。很多人第一次听见“词元”时,会觉得它抽象、陌生。但从此刻起,词元正像“字节”“流量”“千瓦时”那样,成为普通人必须逐步理解的新单位。这也意味着人工智能开始被纳入更成熟的经济叙事。nbe速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

人工智能研究者:从Token到“词元”,变化背后的分量很重

  2025年8月28日,参展商与观展者在2025中国国际大数据产业博览会会场交流城市数智化实践情况。新华社记者陶亮 摄nbe速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  我第一次强烈意识到词元的这种叙事改变,不是在实验室,而是在一张预算表前。nbe速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  前段时间,我和几位企业负责人讨论大模型接入方案。大家谈完模型能力、幻觉率、知识库召回率,财务负责人忽然指着一行费用问我:为什么这套系统不是按账号数收费,也不是按调用次数收费,而是按“月度词元消耗量”核算?nbe速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  那一刻,我意识到,词元已经像工业时代的度电、互联网时代的流量一样,成为企业理解人工智能时代“成本”的新度量衡。它不只服务于技术研发,也会越来越多地出现在预算表、采购单、报价单和监管语境里。nbe速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  我们当然不能把一个时代的变化,全部压缩进一个术语里。但有些时候,一个术语的正式定名,恰恰标志着一个产业阶段已经悄然切换。今天的词元,也许就站在这样的节点上。nbe速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  等到更多人读懂词元,人工智能的落地方式也会被重新理解。以后再听到“这个模型很费词元”“上下文又超了”“本月词元预算不够了”时,我们不妨少一点陌生感。这也在提醒我们:人工智能已经不只是在展示聪明,它正在像水、电、网络和云资源一样,被精确计量,被持续调度,被大规模交易。nbe速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  真正变化的,也从来不只是一个中文名字。(作者系赛迪研究院人工智能研究中心副研究员钟新龙)nbe速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  人工智能客服不能阻碍沟通  AI客服的理想与现实总是存在落差。我们当然希望AI客服能更“聪明”一些。但在此之前,企业不应过分依赖AI客服,而该给消费者多一个选项。  态度客气,但答非所问;表示理解,却不提解决方案   多家A股公司积极布局视频生成模型赛道  本报记者 郭冀川 丁 蓉  继ChatGPT这一现象级的应用推出一年之后,近日,美国开放人工智能研究中心OpenAI正式发布了旗下首款视频生成模型Sora,再次在全球掀起了人工智能关   外媒关注中国春节新变化:年味更浓、消费强劲、旅游更热  中新网2月18日电(魏晨曦)2024年春节是农历新年被确定为联合国假日的第一个春节,浓浓的年味,丰富的美食,消费的热潮……中国人把春节过出了新高度,中国经济的   中国春节跨境游回暖:免签效应强,入境消费火  中新社北京2月18日电 (记者 夏宾)“双向奔赴”的跨境旅游在中国春节假期回暖。  随着中国对多个国家单方面免签证,与新加坡、马来西亚互免签证,推出一系列入境游便利 哈尔滨冰雪大世界日前正式闭园。暂别冬日火爆“出圈”的“尔滨”,东北正迎来全面振兴的春天。从全面振兴的视角研究和探讨“尔滨现象”,具有特殊意义。这是因为,全面振兴的关键在于产业转型发展 新华社记者徐海波、王自宸、宋立崑连日来,湖北省交通运输厅视频调度室里时常灯火通明,各项除雪保畅决策和指令第一时间下发到各路段。20日起,湖北自西向东将出现一轮大范围雨雪冰冻天气,局部地区将出现大 。

本文链接:人工智能研究者:从Token到“词元”,变化背后的分量很重http://www.sushuapos.com/show-5-96080-0.html

声明:本网站为非营利性网站,本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

上一篇: “龙虾”、Token怎么看?AI大咖们这样说

下一篇: 夜宵“顶流”小龙虾,竟是防治污染的利器?

热门资讯

  • 存烫伤或触电风险!宜家召回这款充电器

      中新经纬1月11日电 “上海市场监管”微信号11日消息,宜家召回3008件USB充电器。  上海市市场监管局称,宜家(中国)投资有限公司自2024年1月10日至2024年4月9日召回2020年

  • 刚被罚款3.55亿美元后 特朗普“带货”球鞋

      刚被罚款3.55亿美元后 特朗普“带货”球鞋  中新网2月19日电 据美联社消息,当地时间17日,美国前总统特朗普在一场商业活动中带货了一双“特朗普”牌的金色球鞋,引发热议

  • 2024春节档:史上最火,史上最“卷”

      2024春节档:史上最火,史上最“卷”  羊城晚报记者 李丽  据国家电影局统计数据,2024年春节档总票房80.16亿元,在观影人次、场次和票房3个维度创造影史最高纪录。  过

  • 春节档缘何爆发“撤档潮”

      春节档缘何爆发“撤档潮”  2024年春节档以80亿总票房打破多个纪录,迎来开门红。而8部影片有4部官宣“退档”,也为这个春节档带来了“史上罕见”的标签。一时全网哗然,#

  • 春节假期中国民航运输旅客创历史新高

      春节假期中国民航运输旅客创历史新高  中新社北京2月18日电 (记者 刘文文)记者18日从中国民航局获悉,2024年春节假期(2月10日―2月17日)民航市场平稳有序运行,全国民航

  • 推动京津冀协同发展走深走实

    区域协调发展,关乎统筹一域和全局、前沿和后方、发展和安全。2014年,京津冀协同发展上升为国家战略。十年来,在习近平总书记亲自谋划、亲自部署、亲自

  • 农工党中央召开两会情况通报会

    农工党中央召开两会情况通报会农工党中央拟向全国政协十四届二次会议提交34件中央提案、26件界别小组提案中国改革报、中国发展网记者田新元2月20日,在全国

  • 甘肃成县:务虚求实明方向 凝心聚力鼓干劲

    中国经济导报 中国发展网讯 2月20日,龙年春节热闹欢乐的氛围还未散去,甘肃成县就以开局就是决战的干劲、起步就是冲刺的拼劲的崭新面貌召开2024年工作务虚会,

  • 西安青岛居民3月6日起可办理往来港澳“个人旅游签注”

      西安青岛居民3月6日起可办理往来港澳“个人旅游签注”  中新网2月23日电 据中华人民共和国出入境管理局网站消息,近日,国务院批准增加陕西省西安市、山东省青岛市为内地

  • “中新免签朋友圈”效应:春节赴新游同比涨960%

      “中新免签朋友圈”效应:春节赴新游同比涨960% 带动“新马泰”线路  21世纪经济报道 胡慧茵  春节是新加坡重要的节日。每到农历新年,新加坡的大街小巷就洋溢起浓浓

  • 2024年北京将开通运营3条地铁线路

      2024年北京将开通运营3条地铁线路  昨天,北京市重大项目建设指挥部召开轨道交通建设工作动员部署会。北京青年报记者从会上获悉,《2024年北京市城市轨道交通建设计划》

  • 亚布力对话|居然之家汪林朋:出海首站瞄准东南亚

      中新经纬2月22日电(王玉玲 刘雪玉)22日,居然之家创始人兼董事长汪林朋在亚布力中国企业家论坛间隙接受中新经纬专访时表示,2024年,居然之家将把主要精力聚焦在出海业务上,将

推荐资讯

  • 投资25亿元,河北新雪国居旅度假区项目开工

      近日,新雪国居旅度假区项目开工仪式在张家口市赤城县举行。据悉,新雪国居旅度假区项目,总投资约25亿元,规划面积116平方公里,规划雪道127条,总长度138公里。此外,还拥有国内唯

  • 韩国乐天集团决定出售沈阳乐天城项目

      近日,据业界消息,乐天集团决定将中途停建的沈阳“乐天城”项目出售给沈阳市皇姑区一国企。这距离该项目因“萨德”矛盾被中断已过8年。据消息,乐天集团已与沈阳皇姑诚信发

  • 同程旅行与北京市朝阳区签订合作协议

      近日,同程旅行与北京市朝阳区人民政府签订全面战略合作协议,双方将在智能出行、数字科技、乡村振兴等领域进行全面合作,共同推动朝阳区数字经济重点领域创新应用,带动朝阳区

  • 2024年一季度访日游客消费总额达17505亿日元

      近期,受日元贬值的影响,赴日外国游客数量持续增加。  据日本政府观光局的推算,3月份访日游客首次突破300万人次,创下单月历史最高水平。日元疲软提振了访日游客在奢侈品方

  • 总投资约2.1亿元, 扬州仪征一轻奢民宿项目开工

    近日,枣林湾旅游度假区举行了“八村联兴”共富项目发布会暨枣林湖畔文化旅游发展公司少间轻奢民宿开工仪式。据了解,此次开工的少间轻奢民宿项目,包括亲子乐高主题IP的找你萌,摇

  • 携程推出首个“上海入境免费半日游”项目

      自4月15日起,携程推出首个“上海入境免费半日游”项目,通过向中转上海的国际旅客提供免费半日游产品,不仅提供免费交通接送及外文向导讲解,还提供外币兑换及免费上网服务等

  • 亿元酒店狂卖21家,无人接盘?

    2024开年以来,文旅产业历经春节、清明等火热假期,旅游人次和旅游消费收入节节攀升,整体呈现欣欣向荣的发展态势,但具体到酒店市场来看并不乐观。近期社交媒体上流传的一份上海最

  • 作为美食家的大仲马

    在西方,法国19世纪“积极浪漫主义”作家大仲马(Alexandre Dumas),也许是唯一一位靠通俗文学跻身大文豪之列的作家。从1828年大仲马用业余时间撰写的剧

  • 五一GO!丨“五一”假期交通忙 预计日均跨区域人员流动量超2.7亿人次

    21世纪经济报道记者 高江虹 北京报道“五一”假期即将开启,4月29日,交通运输部对外披露,预计假期期间日均全社会跨区域人员流动量达2.7亿人次

  • 自然资源部:继续大力保障保障性住房用地供应

      近日,据自然资源部消息,为适应房地产市场供求关系发生重大变化的新形势,支持盘活存量土地,促进房地产市场平稳健康发展,自然资源部下发通知,要求各地做好年度住宅用地供应计划

  • 金恪集团旗下多家度假酒店五一期间连续3天满房率100%

    滨州网消息,5月6日,金恪集团旗下度假酒店五一黄金周期间业绩报告出炉,多项指标增长率均创新高。5月1日-5日,集团旗下太仓艳阳度假酒店、桐庐溢美国际酒店、乌镇宜何度假·梵璞主

  • 华阳山旅游发展投资有限公司与小河湾现代生态园签署全面合作框架协议

      5月6日下午,华阳山旅游发展投资有限公司与小河湾现代生态园举行全面合作框架协议签约仪式。  签约仪式上,小河湾现代生态园规划设计团队负责人详细汇报了园区规划建设情

  • 日榜
  • 周榜
  • 月榜