nlp

OpenVINO™ の推論を最適化するためのニューラルネットワーク圧縮フレームワーク

512MBのRAMで大規模言語モデルを探索する

自然言語処理向けのTransformersモデルに関する優れたリソース集。論文、動画、ブログ、公式リポジトリ、Colabノートブックが含まれています。

プラグアンドプレイの言語モデル実装。GPT-2 モデルのトピックや属性の制御が可能。

Transformer ネットワーク、アテンションメカニズム、GPT、BERT、ChatGPT、LLM、転移学習に焦点を当てた NLP リソースのキュレーションリスト。

transformers を使用したニューラル質問生成

短文や混言語テキストに適した、Rust 向けの高精度な自然言語検出ライブラリ

Embedding、ColBERT、ReRanker を含む RAG リトリーバル効率的ファインチューニングの統合

LLM におけるハルシネーション検出に関する論文リスト

Z80-μLMは、8ビットのZ80プロセッサで実行できるほど小型の2ビット量子化言語モデルです。Pythonで対話型モデルをトレーニングし、CP/M .COMバイナリとしてエクスポートして、ビンテージコンピューターとチャットできます。

DataDreamer: プロンプト。合成データの生成。モデルのトレーニングとアライメント。

機械学習、ディープラーニング、コンピュータビジョン、自然语言処理、LLM、Web スクレイピングなどの分野における実践プロジェクトを含む大規模言語モデル (LLM) のノート 50 選

Rust 用の自然言語検出ライブラリ。オンラインデモをお試しください: https://whatlang.org/

Awesome-llm-role-playing-with-persona：指定されたペルソナを使ったロールプレイ用の大規模言語モデルに関する厳選されたリソースリスト

パラメータ効率の良いチューニング（デルタチューニング）のためのプラグアンドプレイライブラリ

📖 対話型AIに関する論文リーディングリスト

AIエージェントエンジニアのための完全学習パス · ゼロからマスターするAIエンジニアリング · 20ステージ503レッスン · 中国語完全翻訳＋サポートサイト＋アニメーション解説動画 · AIエージェントエンジニアになるための修得ガイド

軽量な多言語対応LLM

🧹 テキストクリーニング用の Python パッケージ。

AI関連のチュートリアル。すべて無料でアクセス可能 → https://towardsai.net/editorial

人工知能を学ぶための完全かつ構造化されたハブ。AI、機械学習、ディープラーニング、データサイエンスをカバーし、初心者から上級者向けの書籍、ロードマップ、厳選されたリソースを提供。

中国語100Gの大規模事前学習コーパス

エンジニアリング／スケーリングWGの中心的な場所：ドキュメント、SLURMスクリプトとログ、計算環境、データ

NLPからLLMまでのアルゴリズムフルスタックチュートリアル。オンライン閲覧: https://datawhalechina.github.io/base-llm/

Python製AIアシスタント 🧠

NLP Townによる自然言語処理用ノートブックのコレクション

KakaoBrain KoGPT (韓国語生成事前学習済みトランスフォーマー)

Algebricaは、明確性、構造、概念の一貫性に特化した、無料のオープンな数学知識ベースです。

SPLADE: スパースニューラル検索 (SIGIR21, SIGIR22)

[ACL 2023] 言語モデルプロンプトによる推論：サーベイ論文