pjlab-sys4nlp/llama-moe

⛷️ LLaMA-MoE: Xây dựng Mixture-of-Experts từ LLaMA với Continual Pre-training (EMNLP 2024)

↗ Mở trên GitHub

Sao

1.002

Fork

61

Ngôn ngữ

Python

Giấy phép

Apache-2.0

Push gần nhất

2 năm trước

Python llm llama mixture-of-experts moe continual-pre-training expert-partition

Chưa có intel liên quan

Kho mã này chưa xuất hiện trong bất kỳ nguồn nào radar theo dõi. Bộ thu thập chạy theo lịch — hãy quay lại khi nó bao quát kho mã này.