language-model

Bibliothèque autonome d'apprentissage automatique et de traitement du langage naturel en Go.

Dictionnaires étendus simplifiés/traditionnels, encodage des tons, chaîne d'outils complète d'annotation des tons, chaîne d'outils de mise à jour et modèle grammatical Rime : LMDG - Language, Model, Dictionary, Grammar.

L'implémentation officielle de RAPTOR : Recursive Abstractive Processing for Tree-Organized Retrieval

Petit modèle de dialogue chinois 0.2B (ChatLM-Chinese-0.2B), incluant le code source complet pour les sources de données, le nettoyage, l'entraînement du tokenizer, le pré-entraînement, le fine-tuning SFT et l'optimisation RLHF. Prend en charge le fine-tuning SFT pour les tâches en aval avec des exemples d'extraction de triplets.

Créez automatiquement des diagrammes d'architecture à partir de code en utilisant des grands modèles de langage (LLM).

Macaw-LLM : Modélisation linguistique multimodale avec intégration d'images, de vidéos, d'audio et de texte.

Inférence INT4/INT5/INT8 et FP16 sur CPU pour le modèle de langage RWKV.

[EMNLP 2025 Oral] MemoryOS est conçu pour fournir un système d'exploitation mémoire pour les agents IA personnalisés.

Petit modèle, grande logique : l'optimisation axée sur la diversité permet d'obtenir des capacités de raisonnement de grand modèle avec VibeThinker-1.5B

Un programme d'apprentissage sur les modèles de fondation, de zéro jusqu'à la pointe de la technologie

Modèle ELECTRA pré-entraîné pour le chinois.

Vue d'ensemble des LLM japonais.

Modèle BERT coréen pré-entraîné avec casse (KoBERT).

Utilisez des transformers pré-entraînés comme BERT, XLNet et GPT-2 dans spaCy.

Calcul du nombre de jetons par seconde et des besoins en mémoire GPU pour tout LLM. Prend en charge la quantification llama.cpp/ggml/bnb/QLoRA.

Un framework open source pour modèles de langage étendus (LLM) basés sur la connaissance.

Entraînement compressé d'un modèle de langage (type BERT) avec des ressources de calcul limitées.

Implémentation de Prismer : un modèle vision-langage avec des experts multi-tâches.

Transformers4Rec est une bibliothèque flexible et efficace pour la recommandation séquentielle et basée sur les sessions, compatible avec PyTorch.

Liste d'agents linguistiques basée sur l'article "Cognitive Architectures for Language Agents"

Une application de chat vocal.

💁 Une collection impressionnante de modèles Transformers pour le traitement du langage naturel, incluant des articles, vidéos, blogs, dépôts officiels et notebooks Colab. 🛫☑️

Une collection de jeux de données open source pour entraîner des LLM suivant des instructions (ChatGPT, LLaMA, Alpaca)

Une liste organisée de ressources en NLP axée sur les réseaux Transformer, les mécanismes d'attention, GPT, BERT, ChatGPT, les LLM et l'apprentissage par transfert.

[NeurIPS 2023] LLM-Pruner : sur l'élagage structurel des grands modèles de langage. Supporte Llama-3/3.1, Llama-2, LLaMA, BLOOM, Vicuna, Baichuan, TinyLlama, etc.

ToRA est une série d'agents LLM de raisonnement intégrés à des outils, conçus pour résoudre des problèmes mathématiques complexes en interagissant avec des outils [ICLR'24].

Z80-μLM est un modèle de langage quantifié sur 2 bits suffisamment petit pour fonctionner sur un processeur Z80 8 bits. Entraînez des modèles conversationnels en Python, exportez-les en binaires .COM CP/M et discutez avec votre ordinateur vintage.

Implémentations du SDK client LangSmith

Un wrapper Python pour Kaldi

Plugin de traduction de sous-titres en temps réel pour PotPlayer, intégrant l'API OpenAI ChatGPT ou tout autre modèle compatible avec la même méthode d'appel API, pour briser la barrière de la langue.