TomyTang 在版块 人工智能AI 中发起了话题 OpenAI token计算 1年前
速算:
1K tokens 大概等于750个英文单词，其中一个简体中文汉字大概消耗1.2～3个token，
对于汉字，
基本算法是汉字乘以2.7左右。应该是因为汉字用的是utf8编码，所以总体会比较长，有点吃亏。
<table style=”border-collapse: collapse; width: 100%; height: 42px;” border=”1″>
<tbody>
<tr style=”height: 21px;”>
<td style=”width: 25%; height: 21px;”>AI 模型</td>
<td style=”width: 25%; height: 21px;”>价格 $USD</td>
<td style=”width: 25%; height: 21px;”>token计算/en</td>
<td style=”width: 25%; height: 21px;”>token计算/cn简体</td>
</tr>
<tr style=”height: 21px;”>
<td style=”width: 25%; height: 21px;”>gpt-3.5-turbo</td>
<td style=”width: 25%; height: 21px;”>0.02/1k token</td>
<td style=”width: 25%; height: 21px;”>1k token = 750 words</td>
<td style=”width: 25%; height: 21px;”>1K token ~ 370-400汉字</td>
</tr>
</tbody>
</table>
