karpathy/minbpe
Minimal, clean code for the Byte Pair Encoding (BPE) algorithm commonly used in LLM tokenization.
⭐ 10.7k
⑂ 1.1k
Python
MIT
· 2024-07-01推送
10.7k
Watchers
0
贡献者
0
Commits
0
Releases
59
Open Issues
2024-07-01
最近推送
原文
中文
暂无 README