nlp

[EMNLP 2022] 知識グラフ抽出および構築のためのオープンツールキット

LLMおよびMLLMによるAI機能を有効にするための一般技術

Databricksの基盤モデル用のLLMトレーニングコード

自然言語検出。

このプロジェクトは、書籍 Dive Into Deep Learning (https://d2l.ai/) を再現したもので、MXNetのコードをPyTorchに適合させています。

データサイエンスのAからZまでのロードマップ

MNBVC（Massive Never-ending BT Vast Chinese corpus）超大規模中国語コーパス。chatGPTの学習データである40Tに匹敵します。MNBVCデータセットには、主流文化だけでなく、ニッチな文化や火星文のデータも含まれています。MNBVCデータセットには、ニュース、作文、小説、書籍、雑誌、論文、セリフ、投稿、wiki、古典詩、歌詞、商品紹介、ジョーク、失敗談、チャットログなど、あらゆる形式の純粋なテキスト中国語データが含まれています。

LightLLMは、軽量な設計、容易なスケーラビリティ、高速なパフォーマンスが特徴のPythonベースのLLM（大規模言語モデル）推論およびサービングフレームワークです。

AdalFlow: LLMアプリケーションを構築・自動最適化するためのライブラリ

ChatGPTの資料まとめ学習、継続的な更新...

Hugging FaceのTransformersに関するコース

最先端の自然言語処理 (State of the Art Natural Language Processing)。

言語モデルのトークン化をGB/sで実行

中国語NLP前処理・解析パッケージ。正確、効率的、使いやすい (A Chinese NLP Preprocessing & Parsing Package www.jionlp.com)

超高速なAI意思決定とマルチモーダルデータのインテリジェントな処理。

中国語NLPソリューション（大規模モデル、データ、モデル、トレーニング、推論）

Datawhaleメンバーがまとめた面接経験談。機械学習、CV、NLP、推薦、開発などを含む。スターを歓迎します。

Large Language Models、Text2SQL、Text2DSL、Text2API、Text2Visなどのキュレーションされたチュートリアルとリソース。

テキストドキュメントおよびHTMLページの自動要約モジュール。

[EMNLP 2021] SimCSE: 文埋め込みのシンプルな対照学習 https://arxiv.org/abs/2104.08821

ディープラーニングの入門・上級・特色コース、学術・産業実践事例、知識百科、面接問題集

AIの理論と実践を素早く習得：基礎知識、Transformer、NLP、ML、DL、コンペティション。詳細なコメントとデータセットを含み、誰もが理解して再現できることを目指しています。

🛠 機械学習とデータサイエンスに特化した、オールインワンのウェブベース IDE。

TextAttack 🐙 は、NLP における敵対的攻撃、データ拡張、モデル訓練のための Python フレームワークです https://textattack.readthedocs.io/en/master/

[TMLR] コードおよびその他のソフトウェア工学活動に関する言語モデル研究と関連データセットのキュレーションリスト

中国語での transformers の使用方法を示すリポジトリを作成したい

Document AIのためのリポジトリ

ディープラーニング100例、ディープラーニングDL、画像分類、オブジェクト認識、物体検出、自然言語処理NLP、テキスト分類、TensorFlow、PyTorch

自然言語テキストのためのプラグイン可能なリンター、textlint。

LLMエージェントに関する必読論文集。