• TomyTang 在版块 人工智能AI 中发起了话题 OpenAI token计算 1年, 8个月前

    速算:

    1K tokens 大概等于750个英文单词,其中一个简体中文汉字大概消耗1.2~3个token,

    对于汉字,

    基本算法是汉字乘以2.7左右。应该是因为汉字用的是utf8编码,所以总体会比较长,有点吃亏。
    <table style=”border-collapse: collapse; width: 100%; height: 42px;” border=”1″>
    <tbody>
    <tr style=”height: 21px;”>
    <td style=”width: 25%; height: 21px;”>AI 模型</td>
    <td style=”width: 25%; height: 21px;”>价格 $USD</td>
    <td style=”width: 25%; height: 21px;”>token计算/en</td>
    <td style=”width: 25%; height: 21px;”>token计算/cn简体</td>
    </tr>
    <tr style=”height: 21px;”>
    <td style=”width: 25%; height: 21px;”>gpt-3.5-turbo</td>
    <td style=”width: 25%; height: 21px;”>0.02/1k token</td>
    <td style=”width: 25%; height: 21px;”>1k token = 750 words</td>
    <td style=”width: 25%; height: 21px;”>1K token ~ 370-400汉字</td>
    </tr>
    </tbody>
    </table>

WirelessLink
Logo