language-model

Le seul Super SDK de niveau production entièrement local qui fournit une interface simple, unifiée et puissante pour appeler plus de 200 LLM.

Articles de recherche en TAL (NLP)

Phi2-Chinese-0.2B Entraînez votre propre petit modèle de discussion chinois Phi2 à partir de zéro, prend en charge la connexion à langchain pour charger une base de connaissances locale pour la génération augmentée par récupération (RAG). Entraînez votre propre petit modèle de discussion Phi2 à partir de zéro.

Décodeur CTC (Connectionist Temporal Classification) avec dictionnaire et modèle de langage.

CL-bench : Un benchmark pour l'apprentissage contextuel

Moteur de recherche de modèles de langage construit sur une base de données vectorielle et un stockage clé/valeur générique.

Interactive Composition Explorer : un débogueur pour les programmes de modèles de langage compositionnels.

Une implémentation d'exemple simple du modèle VoiceRAG pour alimenter des expériences d'IA générative vocale interactive utilisant RAG avec Azure AI Search et le modèle gpt-4o-realtime-preview d'Azure OpenAI.

Implémentation de ChatGPT RLHF (Reinforcement Learning with Human Feedback) sur n'importe quel modèle de génération dans les transformers de Hugging Face (bloomz-176B/bloom/gpt/bart/T5/MetaICL)

Modèle coréen pré-entraîné GPT-2 avec casse (KoGPT2)

ChatGPT PROMPTs Splitter. Outil pour traiter en toute sécurité des blocs allant jusqu'à 15 000 caractères par requête

DialogStudio : Vers la collection de jeux de données unifiés la plus riche et la plus diverse, et des modèles conscients des instructions pour l'IA conversationnelle

[ICLR 2024] DNABERT-2 : Modèle de fondation efficace et benchmark pour le génome multi-espèces.

Une bibliothèque Java simple pour interagir avec le serveur Ollama.