deepseek-tokenizer - 一个高效的轻量级tokenization库，仅依赖tokenizers库，不依赖transformers等重量级依赖

宝藏资源
收藏
回帖
新手上路 2天前 08:55
主楼
[资源名称]
deepseek-tokenizer - 一个高效的轻量级tokenization库，仅依赖tokenizers库，不依赖transformers等重量级依赖
[资源来源]
github.com
[资源介绍]
GitHub - AndersonBY/deepseek-tokenizer

- deepseek-tokenizer - 一个高效的轻量级tokenization库，仅依赖tokenizers库，不依赖transformers等重量级依赖。
[资源合集]
DeepSeek 实用集成宝典。将 DeepSeek 大模型能力轻松接入各类软件！
回复 点赞 举报
😀 😊 😵‍💫 😡 🤝 🙏 👍 👎 ❤️