@codeexpander/plugin-ai
v0.1.6
Published
CodeExpander plugin: tokenizer for LLMs (count tokens). 大模型分词器。
Maintainers
Readme
AI Tools / AI 工具
EN — Tokenizer for LLMs: count tokens (e.g. OpenAI-style) to estimate usage and length. Single-tool plugin.
中文 — 大模型分词:统计 token 数量(如 OpenAI 风格),用于估算用量与长度。单工具插件。
Tools / 工具列表
| id | EN | 中文 | |----|-----|------| | tokenizer | Tokenizer | 分词器 |
