随着AI大模型的不断普及,Token这个词被我们不断提及。国家数据局已正式将它命名为“词元”,简单说就是AI处理信息的“最小单位”。我们每次和AI对话,每一个问题、每一段回答,AI都要拆成无数小碎片来理解和生成,这些小碎片就是词元。一个词元通常对应1到2个汉字。

Source: https://www.chinanews.com.cn/cj/2026/05-21/10625614.shtml