生成式 AI 模型(例如 Gemini 模型)会将数据细分为单元(称为“令牌”)以进行处理。每个 Gemini 模型在提示和响应中处理的词元数量都有上限。
本页面介绍了如何估算某个请求的令牌数量和可计费字符数。
计数中会提供哪些信息?
关于计算词元数和计费字符数,请注意以下事项:
统计令牌总数
此计数有助于确保您的请求不会超出允许的上下文窗口。
令牌数将反映在请求输入中提供的所有文件(例如图片)的大小。而不会统计图片数量或视频的秒数。
对于所有 Gemini 模型,一个词元大约相当于 4 个字符。100 个词元大约相当于 60-80 个英语单词。
统计计费字符总数
此计数有助于了解和控制费用,因为对于 Vertex AI,字符数是价格计算的一部分。
可结算字符数将反映在请求输入中提供的文本中的字符数。
对于 Vertex AI,令牌不计入价格计算范围。 详细了解每个模型的令牌数上限和每个模型的价格。
计算词元数和计费字符数的价格和配额
使用 CountTokens
API 无需付费或配额限制。CountTokens
API 的配额上限为每分钟 3000 个请求。