让AI术语不再高冷,每个概念都妙趣横生
Token

Token 是什么?
AI的「按字收费」系统

💰
Token = AI世界的「字」

想象一下:去吃回转寿司,碟子有不同的颜色,不同颜色的碟子价格不同。AI的Token就是那个「碟子」,按个数算钱。

📖 故事时间:打字机引发的革命

第一章:收费方式的进化

古代请人抄书,按「卷」收费——抄一卷多少钱。但有的卷长有的卷短,不公平。

后来改成按「字」收费——一个字一文钱,简单明了。

AI也是一样的道理。最早按「请求次数」收费,但有人发个"你好"和写篇论文都算一次,不公平。

后来改成按Token收费——你用了多少"字",就付多少钱。

🤔 技术解释(说人话版)

Token是AI处理文本的基本单位。简单说,就是AI「拆字」后的最小单元。

📝 Token怎么切?

英文:"Hello World"
→ 可能是 ["Hello", " World"] = 2个Token

中文:"你好世界"
→ 可能是 ["你", "好", "世界"] = 2-3个Token

(AI用一种叫BPE的算法来"切词")

💡 为什么用Token而不是字?

1. 中英文差异

英文单词长度不一,"AI"是2个字符,"artificial intelligence"是23个字符。如果按字符算,AI公司亏死。

2. 标点符号也是Token

逗号、句号、空格,都算Token。所以发消息别太啰嗦,每一个标点都在花钱。

3. Token有"上下文"限制

AI一次能处理的Token数有限,就像工作记忆一样。GPT-4大约能处理32K-128K个Token,大概相当于几万字。

💰 Token怎么算钱?

模型输入价格输出价格
GPT-4o (4o-mini)$0.15/百万$0.60/百万
GPT-4o$2.50/百万$10.00/百万
Claude 3.5$3.00/百万$15.00/百万

* 价格可能有变动,具体以各平台官方为准

💼 实际案例

案例:算一笔账

你问ChatGPT一个问题,大概用了100个Token(输入),它回答了500个Token(输出)。

按GPT-4o-mini的价格:

输入:100 ÷ 1,000,000 × $0.15 = $0.000015

输出:500 ÷ 1,000,000 × $0.60 = $0.0003

总计:约0.0003美元 = 不到1分钱人民币

便宜吧?所以放心大胆地问,但是——如果让它帮你写一篇10000字的文章...

✨ 一句话总结

Token = AI的"字数"单位
你说话、它回答,都要算Token。输入输出分开算,不同模型单价不同。了解Token,才能理解为什么AI有时候贵有时候便宜。

相关术语