nlp

Awesome-LLM-Eval: LLMの評価に特化したツール、データセット/ベンチマーク、デモ、リーダーボード、論文、ドキュメント、モデルの厳選リスト。

インドネシア語初の大規模自然言語処理ベンチマーク。複数の下流タスク、事前学習済み IndoBERT モデル、およびスターターコードを提供 (AACL-IJCNLP 2020)

トレーニングと推論のために PyTorch モデルを複数の GPU に自動分割

このリポジトリは、大規模言語モデル（LLM）の時代に特化した、ストーリー生成／ストーリーテリングに関する優れた論文の網羅的なリストを収集しています。

中国語 Mixtral-8x7B（Chinese-Mixtral-8x7B）

ConvoKitは、会話特徴の抽出や会話内の社会現象の分析を行うためのツールキットです。いくつかの大規模な会話データセットと、それらのデータセットでのツールキットの使用例を示すスクリプトが含まれています。

Python によるテキスト分類のためのアクティブラーニング

セマンティック・ハイパーグラフのための基礎ライブラリ

[ICLR 2024] Sheared LLaMA: 構造化プルーニングによる言語モデル事前学習の高速化

OpenChatBIは、大規模言語モデルを活用したインテリジェントなチャットベースのBIツールであり、自然言語の対話を通じてデータのクエリ、分析、可視化を行うように設計されています。LangGraphとLangChainを使用して、自然言語からSQLへの変換やデータ分析をサポートするチャットエージェントとワークフローを構築します。

AutoPrompt: マスク言語モデルのための自動プロンプト構築

韓国語向けの事前学習済み ELECTRA モデル

人工知能、チャットボット、バーチャルエージェント、ソーシャルメディア自動化、ライブチャット自動化のためのオープンなプラットフォーム

👁️ + 💬 + 🎧 = 🤖 厳選された主要な基盤モデルおよびマルチモーダルモデルのリスト！[論文 + コード + サンプル + チュートリアル]

[ICML 2024] TrustLLM: 大規模言語モデルにおける信頼性

Python 製のテキスト分析ツール Homer は、読者にとってテキストをより明確、シンプル、有用にするのに役立ちます。

HTML から Markdown へのコンバーターおよびクローラー。

大規模言語モデルにおける機械アンラーニング（Machine Unlearning）のリポジトリ

React を使用してチャットボットや会話型体験を構築する

中国語Mixtral混合専門家大規模言語モデル（Chinese Mixtral MoE LLMs）

ユーザーの気に入った映画に類似した映画を推薦し、ユーザーによるレビューの感情分析を行うコンテンツベースの推薦システム

MAD：大規模言語モデルを用いたマルチエージェント討論を初めて探求した研究 :D

Tockはオープンソースの会話型AIツールキットです。

法的裁判文書に基づくイベント抽出とその応用。データの分詞、品詞タグ付け、固有表現抽出、イベント要素抽出、判決結果予測などを含む

🍁 Sycamoreは、非構造化データのためのLLMを活用した検索・分析プラットフォームです。

Python と Deep Learning による NLP

RAG、コード、ツールを用いた AI 出力のためのスパンレベル・グラウンディング検証

PyTorch フレームワークに基づく BERT モデルおよび関連する下流タスクの実装

量子化された最先端のビジョン言語事前学習済みCLIPモデルとONNX Runtime推論エンジンを搭載した、Android向けのオフラインセマンティックText-to-ImageおよびImage-to-Image検索

たった10個のカーネルで学ぶNLPゼロからのステップアップ