rlhf

Eine Bibliothek mit erweiterbaren Implementierungen von DPO, KTO, PPO, ORPO und anderen menschzentrierten Verlustfunktionen (HALOs).

OpenJudge: Ein einheitliches Framework für ganzheitliche Evaluierung und Qualitätsbelohnungen

Eine kuratierte Sammlung von Artikeln, technischen Berichten, Frameworks und Tools zur On-Policy-Distillation (OPD) von großen Sprachmodellen

RewardBench: Das erste Evaluierungstool für Reward-Modelle.

Trinity-RFT ist ein universelles, flexibles und skalierbares Framework für das Reinforcement Fine-Tuning (RFT) von Large Language Models (LLM).

OAT: Ein forschungsfreundliches Framework für das Online-Alignment von LLMs, einschließlich Reinforcement Learning, Präferenzlernen usw.

RLAnything (ICML 2026) & AutoTool (ICML 2026), DemyAgent: Open-Source-RL für LLMs und Agentenszenarien

Einfaches und effizientes Finetuning von LLMs. (Unterstützt LLama, LLama2, LLama3, Qwen, Baichuan, GLM, Falcon)

Eine asynchrone Reinforcement-Learning-Engine für skaliertes Omni-Modal Post-Training.

Die offizielle Implementierung von Self-Play Preference Optimization (SPPO).

Implementierung von ChatGPT RLHF (Reinforcement Learning with Human Feedback) auf jedem Generierungsmodell in Huggingfaces Transformer (blommz-176B/bloom/gpt/bart/T5/MetaICL)

Ein Rezept für Online-RLHF und iteratives Online-DPO.

Eine kuratierte Sammlung von Papern und Ressourcen zu On-Policy Distillation für Large Language Models.

[ICLR 2026] Offizieller Code für TraceRL: Revolutionierung des Post-Trainings für Diffusion LLMs, die Basis der SOTA TraDo-Serie.