什么是Token？为什么大模型要计算Token数

大模型不是直接做的“字符”的计算，而是将字符变成一个数字，也就是变成了 token 来处理。
posted @ 2024-05-27 09:44  华为云开发者联盟  阅读(107)  评论(1)  编辑  收藏  举报