xlnet

Awesome Pretrained Chinese NLP Models，高质量中文预训练模型、大模型、多模态模型与大语言模型集合。

使用 TensorFlow 的机器学习、自然语言处理与文本生成工具包。这是 CASL 项目的一部分：http://casl-project.ai/

中文长文本分类、短句子分类、多标签分类、两句子相似度（Chinese Text Classification of Keras NLP, multi-label classify, or sentence classify, long or short），字词句向量嵌入层（embeddings）和网络层（graph）构建基类，FastText，TextCNN，CharCNN，TextRNN, RCNN, DCNN, DPCNN, VDCNN, CRNN, Bert, Xlnet, Albert, Attention, DeepMoji, HAN, 胶囊网络-CapsuleNet, Transformer-encode, Seq2seq, SWEM, LEAM, TextGCN

预训练中文 XLNet 模型

🛸 在 spaCy 中使用预训练的 transformer，如 BERT、XLNet 和 GPT-2

Transformers4Rec 是一个灵活且高效的序列与基于会话的推荐库，可与 PyTorch 搭配使用。

精选的 NLP 资源列表，聚焦于 Transformer 网络、注意力机制、GPT、BERT、ChatGPT、LLMs 与迁移学习。

TextGen：文本生成模型实现，包含 LLaMA、BLOOM、GPT2、BART、T5、SongNet 等。提供文本生成模型的训练与预测，开箱即用。

论文“GECToR – Grammatical Error Correction: Tag, Not Rewrite”(BEA-20) 与“Text Simplification by Tagging”(BEA-21) 的官方实现