Ghaznix BPE 分词器

实时分词与可视化

专为大语言模型开发者设计的高性能 BPE 分词可视化工具：

• 直观 Token 拆分: 在输入时实时查看带颜色的子词 Token 块。
• 全面的模型支持: 对比 GPT-4、Claude 3.5、Gemini 2.5、DeepSeek R1、Llama 3 等模型的 Token 拆分。
• 动态成本估算: 自动估算并对比不同模型的输入/输出成本。
• 统计与指标: 实时跟踪字符数、Token 数以及 Token 与字符的比例。

打开 BPE 分词器 →