@cyberlangke/tokkit-meituan-longcat
v1.11.0
Published
meituan-longcat tokenizer families for tokkit.
Readme
@cyberlangke/tokkit-meituan-longcat
meituan-longcat 官方 tokenizer 的 tokkit 子包,当前包含 LongCat 文本模型的内置 family。
支持的模型
使用方法
npm install @cyberlangke/tokkit-meituan-longcatimport { getTokenizer } from "@cyberlangke/tokkit-meituan-longcat"
const lite = await getTokenizer("longcat-flash-lite")
const thinking = await getTokenizer("longcat-flash-thinking")
console.log(lite === thinking) // false