language-model

O único Super SDK de nível de produção totalmente local que fornece uma interface simples, unificada e poderosa para chamar mais de 200 LLMs.

Artigo de NLP

Phi2-Chinese-0.2B: Treine seu próprio pequeno modelo de chat em chinês Phi2 do zero, com suporte para integração com langchain para carregar bases de conhecimento locais para RAG (Geração Aumentada por Recuperação). Treine seu próprio pequeno modelo de chat Phi2 do zero.

Decodificador de Classificação Temporal Conexionista (CTC) com dicionário e modelo de linguagem.

CL-bench: Um Benchmark para Context Learning

Mecanismo de busca de modelos de linguagem construído em um banco de dados vetorial e um armazenamento de chave/valor genérico.

Interactive Composition Explorer: um depurador para programas de modelos de linguagem composicionais

Uma implementação de exemplo simples do padrão VoiceRAG para potencializar experiências interativas de IA generativa de voz usando RAG com Azure AI Search e o modelo gpt-4o-realtime-preview da Azure OpenAI.

Implementação de ChatGPT RLHF (Aprendizado por Reforço com Feedback Humano) em qualquer modelo de geração no transformers da huggingface (bloomz-176B/bloom/gpt/bart/T5/MetaICL)

GPT-2 coreano pré-treinado com caixa (KoGPT2)

Divisor de prompts do ChatGPT. Ferramenta para processar com segurança blocos de até 15.000 caracteres por requisição

DialogStudio: rumo à coleção de conjuntos de dados unificados mais rica e diversificada e modelos conscientes de instruções para IA conversacional

[ICLR 2024] DNABERT-2: Modelo de base eficiente e benchmark para genoma de múltiplas espécies

Uma biblioteca Java simples para interagir com o servidor Ollama.