- ✓
GPT-4、GPT-5、Claude 和 Llama 的 Token 计数
- ✓
精确的 token 数量和 token ID
- ✓
Token 与单词比例分析
PromptTokenizer
为 GPT-4、Claude 等模型统计 token 数量——免费
PromptTokenizer 是什么?
PromptTokenizer 是一款免费的 AI 提示词分析工具,可帮助你查看 GPT-4、Claude、Llama 等大语言模型如何对文本进行分词。它支持统计 token 数量、对比不同模型的分词结果,并优化你的 prompts 以提升使用效率。
产品详细介绍
为 GPT-4、Claude 等模型统计 token 数量——免费
PromptTokenizer 是一款免费的 AI 提示词分析工具,可帮助你查看 GPT-4、Claude、Llama 等大语言模型如何对文本进行分词。它支持统计 token 数量、对比不同模型的分词结果,并优化你的 prompts 以提升使用效率。
定价方案
有免费方案创始人评论
嘿,Product Hunt 的朋友们 👋
我开发 PromptTokenizer,是因为我厌倦了总是被 LLM API 账单吓一跳。
一个看起来“很短”的提示词,不知怎么就会消耗数百个 token。JSON 负载比预期更大。代码的分词方式和普通文本不同。同一个提示词,根据发送到 GPT、Claude、Llama、Gemini 或其他模型的不同,成本可能会有巨大差异。
我找到的大多数 token 计数器要么:
• 仅限单一服务提供商
• 需要 API key 才能使用
• 或者只给出一个数字,却不解释原因
我想要一个能让分词过程可视化的工具。
所以我开发了 PromptTokenizer:
🎨 用彩色标签可视化每一个 token
🔢 统计 token 数量
🤖 目前支持 GPT 模型,并计划支持 Claude、Gemini、Llama、Mistral 等模型
💰 在昂贵模式影响成本之前发现它们
🔒 100% 免费且注重隐私——所有内容都在你的浏览器中运行
我每天都会用它来:
• 设计系统提示词
• 优化 RAG 分块大小
• 估算 API 成本
• 在部署前比较模型
期待你的反馈:
❓ 接下来我应该添加哪些模型?
❓ 哪些功能能让它成为你工作流程的一部分?
❓ 哪些分词边界情况曾让你措手不及?
在这里试用 →
https://prompt-tokenizer.site/
感谢查看,也欢迎在评论区提问,我很乐意回答!🚀
创始团队
官网信息
一款面向大型语言模型的免费在线 Token 计数器和分词器可视化工具,帮助开发者了解文本是如何被 AI 模型分词的。