网易首页 > 网易号 > 正文 申请入驻

Token调用量日均140万亿次 你每问AI一句话,背后都在消耗什么?

0
分享至






编者按:  

日均140万亿次的Token调用量,见证AI应用的井喷式爆发,也勾勒出中国词元经济的强劲脉动。

什么是“词元”?词元经济是什么?它正如何改变我们的工作和生活?南都大数据研究院推出“词元崛起”系列报道,从科普解码到趋势剖析,从落地实践到风险预警,更聚焦广东如何凭算力底座与生态优势抢占先机,拆解词元经济的底层逻辑,探寻其发展中的机遇与挑战,与您一同读懂这一重塑未来的新经济力量。

第一期,一文读懂AI处理信息的基本单位“词元”。

超140万亿——这是到今年3月,我国的日均Token调用量。而我们让AI翻译的每一句话,写的每一份周报,修的每一张图片,乃至向AI的每一次吐槽,都在为这个天文数字“添砖加瓦”。

国家数据局局长刘烈宏指出,词元不仅是智能时代的价值锚点,更是连接技术供给与商业需求的“结算单位”。Token(词元)到底是什么?它和AI有什么关系?又为什么被看作智能社会的重要基础资源与核心生产要素?南都大数据研究院带你读懂。

  AI世界的最小“信息块”  

首先需要区分的是,Token在不同领域被赋予了不同的使命,由此衍生出不一样的叫法。在区块链领域,Token常被译为“代币、通证”,强调其价值载体、流通凭证的属性;在网络安全领域,Token则常被译为“令牌、记号、标记”,指用于验证身份、传递权限的标识符号。

最近爆火的“词元”,是人工智能领域名词Token的中文名。根据由全国数据标准化技术委员会归口的《数据基础术语》国家标准(征求意见稿),词元(Token)的定义是:人工智能领域智能设备中信息存储、处理和交换的具有一定语义的基本符号表达。在大模型中作为模型处理和交换信息的最小单位,具有可计量、可定价、可交易的特征。

如何理解这一定义?我们要先理解AI如何“读懂”人类的话。

语言文字对于人类而言,本身携带意义,但对于大模型来说,文字只是符号,要让大模型处理语言,就必须先把这些文字符号转成数字编号。词元就是这个过程中最关键的基础单位。

当我们向AI输入一段指令,大模型通过分词器(Tokenizer)将字句拆分为小块,也就是词元(Token),再赋予对应的数字编号(Token ID),AI模型内部就可以根据训练数据集和设计算法,分析理解Token的含义、Token之间的关系,进而推测我们想要表达的意思。然后,AI会生成一串新的Token,再经由分词器还原回人类能够理解的语言进行输出。

比如,当我们问AI“Token的中文名是什么”时,大模型可能会先将它拆分为“Token/的/中文名/是/什么”5个词元,再根据它们分别对应的数字编号进一步推理计算,最后给出我们“词元”的回答。

同理,我们输入的图像、音视频等多模态,在AI大模型眼里也和文字没有差别,它们都要经由分词器变成数字,都遵循着“把输入的信息切成小块→给每个词元编号→进行计算(模型推理)→生成新编号→再还原成信息输出”的流程。简而言之,技术上,词元就是将人类自然语言进行切分,变成让AI能够理解处理的“语言”的最小单元。

这也就不难理解,为什么“养龙虾”开始风靡后,Token消耗量呈几何级数增长。因为对于AI Agent(智能体)而言,“整理文档”“收发邮件”等看似简单的任务,往往都需要拆分成多个指令,调用数十次乃至上百次大模型推理,而每一次交互背后都要生成与消耗大量Token。

值得一提的是,虽然Token的中文译名是“词元”,但它并不单纯与字词(Word)一一对应,Token既可能是人类语言意义上的短语、单词,也可能是词根、词缀、子词或单个字、标点符号,又或者是图像块、语音片段,我们不能把Token简单换算成“多少个字”或者“多少个词”。

语言、上下文、大模型分词算法和训练语料的不同,可能都会对具体的“拆法”带来区别,导致算出来的Token数相差几倍。比如,“人工智能”一词可能整体被视为一个Token,但如果分词器词表中没有“人工智能”这个整体词,也可能会被拆成“人工”“智能”两个Token;而“artificial intelligence”这个英文短语,则可能被不同的大模型切分为2到4个Token。

一般而言,算法会优先将高频出现的字符组合保留为一个整体,以提高效率。例如,一个2字常用词“中国”可能只占1个Token,而一个罕见单字却可能需要两个Token。另据Open AI官网,1个Token约对应4个英文字符或0.75个英文单词,而非英文文本通常比英文文本消耗更多Token。  

衡量AI算力成本的“计价器”  

每一次AI服务调用都对应明确的词元消耗,处理的词元越多,就需要进行更多的计算,消耗更多算力成本,正是词元这种“可计量、可定价、可交易”的特征,使得大多数AI付费服务的费用,能够按照消耗Token数量进行计算。

也就是说,词元不仅是大模型处理信息的最小单位,更是AI算力成本计费的统一度量衡,是连接技术供给与商业需求的结算单位。词元之于AI,如同“度”之于电力,“流量(GB)”之于互联网,词元消耗量越大,意味着AI服务被使用越频繁、产业商业化程度越高。对于普通用户而言,了解Token计费规则,可以让你的“数字员工”“AI搭子”成本更可控。

目前,大多数大模型API的计费方式是:总费用=输入Token数×输入单价+输出Token数×输出单价。

不同模型的价格不同。一般来说,模型越强大、能力越强,Token单价越贵。以Open AI的GPT-5.4为例,其标准版每百万Token的输入价格是经济版nano的12.5倍,输出价格则为12倍。同一个模型输入和输出的Token单价也存在差异,一般输出价格更贵,这主要是由于输出需要更多算力资源。

当然,不同公司的大模型服务定价策略实际更为复杂,除了模型的类型、能力外,还会受到模型的成本、受众以及公司的定位与商业模式等多重影响。

就每百万Token输出价格来看,目前,中国模型普遍在0.42到3.6美元之间,性价比较高;而Open AI的GPT-5.4是15美元,Google的Gemini 3.1 Pro则根据提示词(prompt)长度不同分为12美元和18美元两个价格,Anthropic于近日发布的最新模型Claude Opus 4.7则定价为25美元。    

  驱动智能社会运转的“基础资源”  

回到根本,词元不会凭空产生,它是由高性能的GPU在消耗大量电能、完成数千亿次推理运算后产生的数字资产。每一个词元的生成,都对应着算力运转和电力消耗,而这背后的物理存在形式,正是数据中心。

由此可见,词元正是串联起数据、算法(智力)、算力三大核心要素的关键枢纽,不应仅被简单看作AI算力成本的计费单位。当下,围绕词元的生产、交换、分配与消费,一套新的价值体系正在加速演进形成,并成为人工智能产业发展的重要路径。

在英伟达GTC大会的演讲中,英伟达CEO黄仁勋提出,AI行业竞争已从“大模型时代”发展到“词元产能”时代,未来的数据中心将不再是存储文件的仓库,而是“生产Token的工厂”,每瓦特电力的Token吞吐量(能效)会成为决定其竞争力与营收的核心指标。而词元则是AI时代的“新大宗商品”“硬通货”,未来将根据速度和智能程度分层定价,为推理场景打开更广阔的商业化空间。

以数字化为核心的新基建正在成为全球各国争相布局的战略高地。2026年,我国政府工作报告首次明确提出“打造智能经济新形态”,并将“超大规模智算集群、算电协同等新基建工程”纳入重点任务。而电力与算力的协同效率,正是词元生产、调用、分发的核心成本锚点。

可以说,如同水、电一样,词元正成为驱动智能时代社会运转的重要基础资源、核心生产要素,推动AI服务实现可精确计量、可持续调度、大规模交易,与我们的生活工作、企业的长远发展,乃至一个国家的竞争力都息息相关。 

出品:南都大数据研究院

文字:南都研究员 唐静怡

制图:何欣

资料来源:国家数据局、中国科学院、科普中国网、艾媒咨询、公开媒体报道等

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
越来越多的人呼吁取消退休工资,以缓解养老压力,但真的可行吗?

越来越多的人呼吁取消退休工资,以缓解养老压力,但真的可行吗?

离离言几许
2026-08-19 16:32:37
正式退出,王岚嵚离队,三方交易,转会费3000万,郭艾伦回归有结论

正式退出,王岚嵚离队,三方交易,转会费3000万,郭艾伦回归有结论

眉目依旧v
2026-08-20 12:22:49
67岁许家印当庭认罪,背后3座"靠山"全倒了:一死一病一死缓

67岁许家印当庭认罪,背后3座"靠山"全倒了:一死一病一死缓

史之韵
2026-08-20 21:33:03
8月起退休返聘“变天”了?60岁后继续打工,3个问题很多人没弄清

8月起退休返聘“变天”了?60岁后继续打工,3个问题很多人没弄清

白米饭怎么吃
2026-08-19 21:16:30
西蒙尼疯狂抓头!25岁李刚仁无视4人:轰20米世界波 斩获全场MVP

西蒙尼疯狂抓头!25岁李刚仁无视4人:轰20米世界波 斩获全场MVP

风过乡
2026-08-20 06:20:03
瞒不住了,美军王牌航母在南海突发猝死,4天绝境曝光

瞒不住了,美军王牌航母在南海突发猝死,4天绝境曝光

至死不渝的爱情
2026-08-19 07:47:44
贪官末日来了!中央反腐新规已落地,无论在职退休一律终身追责

贪官末日来了!中央反腐新规已落地,无论在职退休一律终身追责

职场资深秘书
2026-08-19 23:18:37
杭州97年美女相亲,要求找A10的,一问自身优势瞬间沉默

杭州97年美女相亲,要求找A10的,一问自身优势瞬间沉默

映射生活的身影
2026-08-11 12:24:28
联合国管不了特朗普,世界管不了特朗普,没有敢碰特朗普!美国可以当霸王,但世界人民与美国是离心离德,终将对美国不是什么好事

联合国管不了特朗普,世界管不了特朗普,没有敢碰特朗普!美国可以当霸王,但世界人民与美国是离心离德,终将对美国不是什么好事

扶苏聊历史
2026-08-20 15:13:21
王曦雨出局:输得不冤!对手的夸赞和表现已是实力最好的证明!

王曦雨出局:输得不冤!对手的夸赞和表现已是实力最好的证明!

网球之家
2026-08-20 13:19:29
取消特权,全民赞成!退休金设计者郑秉文,55年出生,他会怎样?

取消特权,全民赞成!退休金设计者郑秉文,55年出生,他会怎样?

娱乐的硬糖吖
2026-07-29 16:44:46
诺基亚退出中国,或导致全球6G分裂

诺基亚退出中国,或导致全球6G分裂

TMT流程审计
2026-08-20 23:35:05
澳大利亚愤怒:召见以色列大使

澳大利亚愤怒:召见以色列大使

环球网资讯
2026-08-20 21:36:08
“薛甄珠”一角翻红,手撕凌玲片段引众多博主翻拍,许娣回应:十年前创作如今仍不落伍

“薛甄珠”一角翻红,手撕凌玲片段引众多博主翻拍,许娣回应:十年前创作如今仍不落伍

东方不败然多多
2026-08-21 00:37:29
比缅北凶险100倍!曾经的旅游胜地,如今黄赌毒俱全,乱象随处可见

比缅北凶险100倍!曾经的旅游胜地,如今黄赌毒俱全,乱象随处可见

琅琊财经
2026-07-31 22:02:18
女主播看《黑钟馗》起鸡皮疙瘩:电影 艺术 巨大飞跃

女主播看《黑钟馗》起鸡皮疙瘩:电影 艺术 巨大飞跃

游民星空
2026-08-20 16:09:36
美国没想到,俄罗斯也没想到!中国石油,如今会成为"遥遥领先"

美国没想到,俄罗斯也没想到!中国石油,如今会成为"遥遥领先"

柏拉图的诉说1
2026-07-21 00:51:24
活捉赖清德不再是口号!美军司令亲口承认:留给台岛的时间不多了

活捉赖清德不再是口号!美军司令亲口承认:留给台岛的时间不多了

无悔的灿烂人生
2026-08-17 20:15:59
更衣室全炸了!维尼修斯抢权狂撕,穆里尼奥能按住爆药桶?

更衣室全炸了!维尼修斯抢权狂撕,穆里尼奥能按住爆药桶?

无月可归辛
2026-08-20 11:11:55
今年65岁,悟出一个心酸道理:在儿媳妇眼里,只要你还能接送孩子做饭,那就是“妈”;只要你需要人照顾,那就是“累赘”

今年65岁,悟出一个心酸道理:在儿媳妇眼里,只要你还能接送孩子做饭,那就是“妈”;只要你需要人照顾,那就是“累赘”

晓艾故事汇
2026-08-20 11:40:53
2026-08-21 05:47:00
南方都市报 incentive-icons
南方都市报
换一种方式,南都在现场。
628413文章数 3590212关注度
往期回顾 全部

科技要闻

快手Q2研发狂烧45亿:如何面对双面夹击

头条要闻

10岁男童两次校外徘徊后溺亡 监控显示多次遭老师殴打

头条要闻

10岁男童两次校外徘徊后溺亡 监控显示多次遭老师殴打

体育要闻

46岁小罗抵达意大利 将为拉文纳征战意丙

娱乐要闻

任重晒全家福官宣二胎喜讯

财经要闻

许家印被判处无期 恒大集团被罚88.2亿

汽车要闻

比总部还大?比亚迪藏在上海虹桥的巨无霸闪充站!

态度原创

本地
游戏
艺术
手机
公开课

本地新闻

先导片|攀登不止,让不同的故事在此连接

黑猴赚的钱没白花!《黑钟馗》水面效果以假乱真

艺术要闻

中国最强“造假大师”张大千:靠假画骗翻半个画坛,专家看完直接认输

手机要闻

华为OPPO阔直板新机齐曝光:麒麟9030S硬刚200Mp大底,16:9要成新主流?

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版