nlp

Awesome-LLM-Eval：精选的工具、数据集/基准测试、演示、排行榜、论文、文档与模型列表，主要用于 LLM 评估。一个由工具、基准/数据、演示、排行榜和大模型等组成的精选列表，主要面向基础大模型评测，旨在探求生成式AI的技术边界。

针对印尼语的首个大型自然语言处理基准测试。我们提供多个下游任务、预训练的 IndoBERT 模型以及入门代码！(AACL-IJCNLP 2020)

这个存储库收集了大量关于故事生成／讲故事（Story Generation / Storytelling）的优秀论文，专注于大型语言模型（LLMs）时代。

自动将 PyTorch 模型分割到多个 GPU 上进行训练与推理

中文 Mixtral-8x7B（Chinese-Mixtral-8x7B）

ConvoKit 是一个用于提取对话特征并分析对话中社会现象的工具包。内含多个大型对话数据集，以及示范如何在这些数据集上使用工具包的脚本。

Python 文本分类的主动学习

语义超图的基础库

[ICLR 2024] Sheared LLaMA：通过结构化剪枝加速语言模型预训练

OpenChatBI 是一个基于大语言模型的智能对话式 BI 工具，旨在帮助用户通过自然语言对话来查询、分析和可视化数据。它使用 LangGraph 和 LangChain 来构建对话代理与工作流，支持自然语言转 SQL 以及数据分析。

AutoPrompt：针对掩码语言模型的自动提示词构建。

韩语预训练 ELECTRA 模型

一个用于人工智能、聊天机器人、虚拟代理、社交媒体自动化与即时聊天自动化的开放平台。

👁️ + 💬 + 🎧 = 🤖 精选顶级基础与多模态模型列表！[论文 + 代码 + 示例 + 教程]

[ICML 2024] TrustLLM：大型语言模型的信任度

Homer 是 Python 中的文字分析器，可帮助您的文字更清晰、简单，对读者更有用。

HTML 转 Markdown 转换器与爬虫。

大型语言模型机器遗忘（machine unlearning）资源库

使用 React 构建聊天机器人与对话体验

中文 Mixtral 混合专家大模型（Chinese Mixtral MoE LLMs）

MAD：首次探索大型语言模型多智能体辩论的工作 :D

一个基于内容的推荐系统，能推荐与用户喜爱电影相似的电影，并分析用户评论的情感

Tock，开源对话式 AI 工具包。

基于法律裁判文书的事件抽取及其应用，包括数据的分词、词性标注、命名实体识别、事件要素抽取和判决结果预测等内容

🍁 Sycamore 是一个由 LLM 驱动的非结构化数据搜索与分析平台。

针对 RAG、代码及工具为基础的 AI 输出结果进行 Span 层级的对齐验证。

使用 Python 与深度学习进行自然语言处理 (NLP)

基于 PyTorch 框架的 BERT 模型及其相关下游任务实现。

Android 离线语义文字转影像与影像转影像搜索，由量化后的顶尖视觉语言预训练 CLIP 模型与 ONNX Runtime 推理引擎驱动

仅需 10 个 Kernels 即可从零开始掌握 NLP。