language-model

Biblioteca independente de Machine Learning e Processamento de Linguagem Natural em Go

Dicionários estendidos simplificado/tradicional, codificação de tons, cadeia de ferramentas de anotação de tons completa, cadeia de ferramentas de atualização e modelo gramatical Rime: LMDG - Language, Model, Dictionary, Grammar. Sim, este é o "Império Romano" do Pinyin Wanxiang!

A implementação oficial do RAPTOR: Recursive Abstractive Processing for Tree-Organized Retrieval

Modelo de chat em chinês de 0.2B (ChatLM-Chinese-0.2B), com código aberto completo para fontes de dados, limpeza, treinamento de tokenizer, pré-treinamento, ajuste fino SFT e otimização RLHF. Suporta ajuste fino SFT para tarefas downstream, incluindo exemplos de extração de triplas.

Crie diagramas de arquitetura a partir de código automaticamente usando grandes modelos de linguagem (LLMs).

Macaw-LLM: Modelagem de Linguagem Multimodal com Integração de Imagem, Vídeo, Áudio e Texto

Inferência INT4/INT5/INT8 e FP16 em CPU para o modelo de linguagem RWKV

Modelo pequeno, lógica grande: otimização orientada pela diversidade desperta a capacidade de raciocínio de grandes modelos no VibeThinker-1.5B.

[EMNLP 2025 Oral] MemoryOS foi projetado para fornecer um sistema operacional de memória para agentes de IA personalizados.

Um currículo para aprender sobre modelos de fundação, do zero à fronteira tecnológica.

Modelo pré-treinado ELECTRA em chinês

Resumo de LLMs em japonês - Visão geral de LLMs japoneses

KoBERT (Korean BERT pre-trained cased).

🛸 Use transformers pré-treinados como BERT, XLNet e GPT-2 no spaCy

Calcule tokens/s e requisitos de memória GPU para qualquer LLM. Suporta quantização llama.cpp/ggml/bnb/QLoRA.

Um framework de Large Language Model com base de conhecimento de código aberto.

Comprimir o treinamento de um modelo de linguagem (tipo BERT) em recursos computacionais limitados.

Implementação de "Prismer: A Vision-Language Model with Multi-Task Experts".

Transformers4Rec é uma biblioteca flexível e eficiente para recomendação sequencial e baseada em sessão, compatível com PyTorch.

Lista de agentes de linguagem baseada no artigo "Cognitive Architectures for Language Agents"

Um aplicativo de chat por voz

💁 Tesouro incrível de modelos Transformers para processamento de linguagem natural, contendo artigos, vídeos, blogs, repositório oficial e notebooks do Colab. 🛫☑️

Uma coleção de conjuntos de dados de código aberto para treinar LLMs que seguem instruções (ChatGPT, LLaMA, Alpaca)

Uma lista com curadoria de recursos de PNL focados em redes Transformer, mecanismo de atenção, GPT, BERT, ChatGPT, LLMs e aprendizado por transferência.

[NeurIPS 2023] LLM-Pruner: Sobre a poda estrutural de Large Language Models. Suporta Llama-3/3.1, Llama-2, LLaMA, BLOOM, Vicuna, Baichuan, TinyLlama, etc.

ToRA é uma série de LLM Agents integrados a ferramentas projetados para resolver problemas desafiórios de raciocínio matemático interagindo com ferramentas [ICLR'24].

Z80-μLM é um modelo de linguagem quantizado de 2 bits pequeno o suficiente para rodar em um processador Z80 de 8 bits. Treine modelos conversacionais em Python, exporte-os como binários .COM para CP/M e converse com seu computador antigo.

Implementações do SDK do cliente LangSmith

Um wrapper Python para Kaldi

Plugin de tradução de legendas em tempo real que integra a API do OpenAI ChatGPT (ou qualquer modelo com o mesmo método de chamada de API) ao PotPlayer, permitindo traduzir legendas enquanto assiste a vídeos.