在每个AI应用程序的底层，都有算法在以自己的语言处理数据，这种语言基于token词汇。

token是通过分解更大信息块而来的微小数据单元。AI模型处理token以学习它们之间的关系，并解锁包括预测、生成和推理在内的能力。token处理得越快，模型学习和响应的速度就越快。