shibing624

pycorrector é um kit de ferramentas para correção de erros de texto. Implementa modelos como Kenlm, T5, MacBERT, ChatGLM3 e Qwen2.5 para cenários de correção, pronto para uso.

MedicalGPT: Treine seu próprio modelo GPT médico com o pipeline de treinamento do ChatGPT. Implementa pré-treinamento incremental (PT), ajuste fino supervisionado (SFT), RLHF, DPO, ORPO e GRPO.

text2vec, texto para vetor. Ferramenta de representação vetorial de texto, convertendo texto em matrizes vetoriais, implementando modelos de representação de texto e cálculo de similaridade como Word2Vec, RankBM25, Sentence-BERT, CoSENT, pronto para uso.

similarity: Kit de ferramentas de cálculo de similaridade de texto para Java. Escrito em Java, pode ser usado para cálculo de similaridade de texto, análise de sentimentos e outras tarefas, pronto para uso.

TextGen: Implementação de modelos de geração de texto, incluindo LLaMA, BLOOM, GPT2, BART, T5, SongNet e outros. Inclui treinamento e previsão prontos para uso para modelos como LLaMA, ChatGLM, BLOOM, GPT2, Seq2Seq, BART, T5, UDA, entre outros.

Similarities: um kit de ferramentas para cálculo de similaridade e busca semântica. Suporta busca de texto em texto, texto em imagem e imagem em imagem para centenas de milhões de dados. Desenvolvido em Python 3, pronto para uso.

RAG para LLM local, converse com arquivos PDF/doc/txt, ChatPDF. Implementação totalmente nativa da funcionalidade RAG, baseada em LLM local, modelo de embedding e modelo reranker, com suporte a GraphRAG, sem a necessidade de instalar nenhuma biblioteca de agent de terceiros.

ChatPilot: Interface web de agente de chat, implementando um frontend de chat compatível com pesquisa do Google, chat com arquivos e URLs (RAG) e recursos de intérprete de código, replicando o Kimi Chat.

Motor de Reconhecimento Automático de Fala (ASR) e Conversão de Texto em Fala (TTS). Reconhecimento de fala em chinês e inglês, síntese de voz com múltiplos papéis, suporte multilíngue e alta precisão

pytextclassifier is a toolkit for text classification. 文本分类，LR，Xgboost，TextCNN，FastText，TextRNN，BERT等分类模型实现，开箱即用。