有试过处理10w字左右的书需要多少token吗？

[justforuse]

我昨天试了一本8w左右的epub, 结果阿里免费的100w Token用完了。。

Serial  [#...........] 9,623 / 85,347 words
Digest  [............] 1,347 / 85,347 words



The free tier of the model has been exhausted

[Moskize91]

先把字折算成 token，然后乘以 10 这样子。实际上如果循环的时候发现收敛困难，这个数字只会上涨。可以把 EPUB 裁一下，摘取自己感兴趣的章节。毕竟整本书压缩对 token 需求量还是蛮大的。