karpathy/minbpe
@karpathyMã nguồn tối giản, sạch sẽ cho thuật toán Byte Pair Encoding (BPE) thường được sử dụng trong tokenization của LLM.
Sao
10.702
Fork
1.094
Ngôn ngữ
Python
Giấy phép
MIT
Push gần nhất
2 năm trước
Intel liên quan (0)
Chưa có intel liên quan
Kho mã này chưa xuất hiện trong bất kỳ nguồn nào radar theo dõi. Bộ thu thập chạy theo lịch — hãy quay lại khi nó bao quát kho mã này.