nlp

[EMNLP 2022] Um kit de ferramentas aberto para extração e construção de grafos de conhecimento

Tecnologia geral para habilitar capacidades de IA com LLMs e MLLMs.

Código de treinamento de LLM para modelos de fundação Databricks

Detecção de linguagem natural

Este projeto reproduz o livro Dive Into Deep Learning (https://d2l.ai/), adaptando o código de MXNet para PyTorch.

Roteiro de Ciência de Dados de A a Z.

MNBVC (Massive Never-ending BT Vast Chinese corpus). Um conjunto de dados chinês em larga escala, comparável aos 40T de dados usados para treinar o ChatGPT, abrangendo desde cultura mainstream até nichos e gírias.

LightLLM é um framework de inferência e atendimento para LLMs (Modelos de Linguagem Grande) baseado em Python, notável por seu design leve, fácil escalabilidade e alto desempenho.

AdalFlow: A biblioteca para construir e otimizar automaticamente aplicações LLM.

Compilação de materiais de estudo sobre ChatGPT, com atualizações contínuas

O curso da Hugging Face sobre Transformers.

Processamento de Linguagem Natural de última geração

Tokenização de modelos de linguagem a GB/s

Pacote de pré-processamento e análise de NLP em chinês, preciso, eficiente e fácil de usar

Tomada de decisão por IA ultrarrápida e processamento inteligente de dados multimodais.

Soluções de NLP em chinês (LLMs, dados, modelos, treinamento, inferência)

Guia de entrevistas compilado por membros da Datawhale, abrangendo aprendizado de máquina, CV, NLP, sistemas de recomendação, desenvolvimento e mais.

Tutoriais e recursos selecionados para Large Language Models, Text2SQL, Text2DSL, Text2API, Text2Vis e muito mais.

Módulo para sumarização automática de documentos de texto e páginas HTML.

[EMNLP 2021] SimCSE: Aprendizado contrastivo simples de embeddings de sentenças https://arxiv.org/abs/2104.08821

Curso introdutório, avançado e especializado de Deep Learning, casos acadêmicos, casos de prática industrial, enciclopédia de conhecimento de Deep Learning e banco de questões de entrevistas. O curso, o caso e o conhecimento de Deep Learning e IA

Guia rápido de teoria e prática de IA: fundamentos, Transformer, NLP, ML, DL e competições. Inclui comentários detalhados e datasets para facilitar a compreensão e reprodução.

🛠 IDE baseada na web tudo-em-um especializada em aprendizado de máquina e ciência de dados.

TextAttack é um framework Python para ataques adversários, aumento de dados e treinamento de modelos em NLP.

[TMLR] Uma lista curada de pesquisas em modelagem de linguagem para código (e outras atividades de engenharia de software), além de conjuntos de dados relacionados.

Repositório para ilustrar o uso de transformers em chinês.

Um repositório para Document AI

100 exemplos de aprendizado profundo, DL, classificação de imagens, reconhecimento de objetos, detecção de objetos, processamento de linguagem natural (NLP), classificação de texto, TensorFlow, PyTorch

textlint é um linter plugável para textos em linguagem natural.

Artigos de leitura obrigatória sobre agentes de LLM.