Token 推定(文字)
文字数からざっくり token。
ceil(文字/4)。語推定と違い文字。プロンプト統計と違い文字ヒューリスティックのみ。ローカル、モデル呼び出しなし。
Tokens (approx): 10
Characters: 39
Words: 6
トークンあたりの文字数: 4
文字数からざっくり token。
ceil(文字/4)。語推定と違い文字。プロンプト統計と違い文字ヒューリスティックのみ。ローカル、モデル呼び出しなし。
Tokens (approx): 10
Characters: 39
Words: 6
トークンあたりの文字数: 4