qiufengqijun

Un proyecto para entrenar modelos de lenguaje extensos desde cero, incluyendo preentrenamiento, ajuste fino y optimización de preferencia directa, con 1B de parámetros y soporte para chino e inglés.