language-model

Eigenständige Machine-Learning- und Natural-Language-Processing-Bibliothek in Go.

Vereinfachte/traditionelle chinesische Vokabeldatenbank / Tonzeichen-Kodierung / Umfassendste Tonzeichen-Annotationstoolkette / Wanxiang-Aktualisierungstoolkette / Rime-Sprachmodell: LMDG - Language, Model, Dictionary, Grammar.

Die offizielle Implementierung von RAPTOR: Recursive Abstractive Processing for Tree-Organized Retrieval

Chinesisches Sprachmodell mit 0,2B Parametern (ChatLM-Chinese-0.2B). Der gesamte Quellcode für Datenquellen, Datenbereinigung, Tokenizer-Training, Modell-Pretraining, SFT-Instruction-Tuning und RLHF-Optimierung ist Open Source. Unterstützt SFT-Fine-Tuning für nachgelagerte Aufgaben und enthält ein Beispiel für das Tripel-Informations-Extraction-Fine-Tuning.

Architekturdiagramme automatisch aus Code mit großen Sprachmodellen (LLMs) erstellen.

Macaw-LLM: Multimodale Sprachmodellierung mit Bild-, Video-, Audio- und Textintegration

INT4/INT5/INT8- und FP16-Inferenz auf der CPU für das RWKV-Sprachmodell

[EMNLP 2025 Oral] MemoryOS wurde entwickelt, um ein Speicher-Betriebssystem für personalisierte KI-Agenten bereitzustellen.

Kleines Modell, große Logik: Diversitätsgesteuerte Optimierung entlockt VibeThinker-1.5B die Denkfähigkeit großer Modelle.

Ein Lehrplan zum Erlernen von Foundation Models, von Grund auf bis zur vordersten Front

Vortrainiertes chinesisches ELECTRA-Modell

Übersicht japanischer LLMs

Koreanisches BERT pre-trained cased (KoBERT)

🛸 Vorrainierte Transformer wie BERT, XLNet und GPT-2 in spaCy verwenden

Berechnet Token/s und GPU-Speicherbedarf für beliebige LLMs. Unterstützt llama.cpp/ggml/bnb/QLoRA-Quantisierung.

Ein Open-Source-Framework für wissensbasierte Large Language Models.

Das Training eines Sprachmodells (vom Typ BERT) auf begrenzte Rechenleistung komprimieren.

Die Implementierung von „Prismer: A Vision-Language Model with Multi-Task Experts“.

Transformers4Rec ist eine flexible und effiziente Bibliothek für sequentielle und sitzungsbasierte Empfehlungen und funktioniert mit PyTorch.

Liste von Sprach-Agenten basierend auf dem Paper „Cognitive Architectures for Language Agents“

Eine Voice-Chat-App

💁 Fantastische Sammlung von Transformers-Modellen für die natürliche Sprachverarbeitung mit Papers, Videos, Blogs, offiziellem Repository sowie Colab-Notebooks. 🛫☑️

Eine Sammlung von Open-Source-Datensätzen zum Training von Instruction-Following-LLMs (ChatGPT, LLaMA, Alpaca)

Eine kuratierte Liste von NLP-Ressourcen mit Schwerpunkt auf Transformer-Netzwerken, Attention-Mechanismen, GPT, BERT, ChatGPT, LLMs und Transfer Learning.

[NeurIPS 2023] LLM-Pruner: Zum strukturellen Pruning von Large Language Models. Unterstützt Llama-3/3.1, Llama-2, LLaMA, BLOOM, Vicuna, Baichuan, TinyLlama usw.

ToRA ist eine Reihe von Tool-integrierten Reasoning-LLM-Agenten, die entwickelt wurden, um schwierige mathematische Reasoning-Probleme durch Interaktion mit Tools zu lösen [ICLR'24].

Z80-μLM ist ein auf 2 Bit quantisiertes Sprachmodell, das klein genug ist, um auf einem 8-Bit-Z80-Prozessor zu laufen. Trainieren Sie Konversationsmodelle in Python, exportieren Sie sie als CP/M-.COM-Binärdateien und chatten Sie mit Ihrem Vintage-Computer.

LangSmith Client SDK-Implementierungen

Ein Python-Wrapper für Kaldi

Ein Echtzeit-Untertitel-Übersetzungs-Plugin, das die ChatGPT-API von OpenAI (oder jedes andere Modell mit derselben API-Aufrufmethode) in PotPlayer integriert. Es ermöglicht Ihnen, Untertitel während des Videoansehens in Echtzeit zu übersetzen, um Sprachbarrieren zu überwinden und Ihr Seherlebnis zu verbessern.