Token 与词语

Token 与词语

词语对人类来说容易计数,但 AI 模型通常以 token 处理文本。粘贴文本以比较字符、词数、估算 token 和潜在成本。

词语是人的单位

词语适合阅读和写作,但通常不是 AI API 的计费单位。

Token 是模型单位

Token 可以是一个词、词的一部分、标点、空格、代码或格式。

计数会变化

语言、标点、代码、Markdown、JSON 和消息结构都会影响估算。

成本通常按 token

AI 成本通常基于输入和输出 token,而不是词数。

计算器

估算你的 AI 提示词成本

粘贴提示词,选择示例价格配置,并估算每次运行、每天和每月的成本。

输入 token 是你发送给 AI 模型的内容。输出 token 是模型返回的内容。API 提供商通常会分别计价。

高级设置

目前价格为手动输入。例如:如果提供商每 100 万 token 收取 $2 输入和 $10 输出,请输入 2 和 10。

能耗是粗略估算。实际能耗取决于模型、硬件、提供商、数据中心效率、工作负载和地区。

FAQ

Token 与词语常见问题

一个词等于一个 token 吗?

不一定。有些词是一个 token,有些会拆成多个,标点或格式也可能计入。

为什么 token 会影响 AI 成本?

提供商通常按 token 计费。输入或输出 token 越多,成本通常越高。

token 数会因模型而异吗?

会。不同模型和分词器可能以不同方式计算同一段文本。