nlp

[ICLR 2025] アライメント済み LLM に何も与えずにプロンプティングすることによる、ゼロからのアライメントデータ合成。効率的で高品質な合成データ生成パイプライン！

高速な国際住所の解析および正規化のための libpostal Python バインディング

オープンソースLLMのファインチューニング、アブレーション、単体テストを行うためのツールキット。

Eigen ベースの軽量な非線形プログラミングソルバー（Ipopt、Snopt）用 C++ インターフェース

👑 Streamlitアプリ向けのspaCyビルディングブロックとビジュアライザー

さまざまなNLPタスク向けにtransformersをファインチューニングするチュートリアルが含まれるGitHubリポジトリ

🚀 Catalystは高速性を追求して構築されたC#の自然言語処理ライブラリです。spaCyのデザインにインスパイアされており、事前訓練済みモデル、単語および文書分散表現の訓練に対する即座のサポート、柔軟な固有表現抽出モデルを提供します。

PHP用の言語検出ライブラリ。指定されたテキスト文字列から言語を検出します。

🔥 機械学習 / ディープラーニング / Python / 大規模言語モデル / マルチモーダル / LLM / deeplearning / Python / アルゴリズム面接 / NLP チュートリアル

ColPali などの遅延インタラクション・マルチモーダルモデルをわずか数行のコードで使用できます。

コード生成タスク向けに設計された新しいモデルを導入しました。HumanEval ベースデータセットでのテスト精度は、GPT-4 Turbo（2024年4月版）および GPT-4o を上回っています。

機械学習、ディープラーニング、生成 AI、NLP、データサイエンスをカバーする、無料かつ高品質な AI ツール、API、データセット、学習リソースの厳選コレクション。開発者、研究者、クリエイターの迅速な AI 探索と開発を支援します。

インド諸言語向けの Natural Language Toolkit。アプリケーション開発者が必要とするさまざまな NLP タスクへの即座のサポート提供を目的としています

DeepResearch Bench: ディープリサーチエージェントのための包括的なベンチマーク

キーの費用を負担できないため、オンライン版は一時的に利用できません。クローンしてローカルで実行してください。注意: デフォルトの openai キーを設定しています。キーがプランの上限を超えて無効になった場合はお知らせください。応答速度は openai に依存します（公式が混雑して遅くなる場合があります）。

長文・短文を問わず利用できる、JavaおよびJVM向けの最も高精度な自然言語検出ライブラリ

CSV、PDF、TXTファイル📄、および YTB動画🎥 とチャットできる AI チャットボット 🤖 | Langchain🦜 | OpenAI | Streamlit ⚡ を使用

小米（Xiaomi）の自然言語処理ツールキット。

OCTIS: トピックモデルの比較が簡単に行える Python パッケージ (EACL2021 デモトラック採択)

GPT-3.5、GPT-4 Turbo、Claude、およびローカルのオープンソースLLMを使用して、複数のドキュメント（PDFやTXT）に接続してチャットを行います。

Trankit は、多言語自然言語処理のための軽量な Transformer ベース Python ツールキットです

LexPredictによるLexNLP

機械翻訳（MT）評価のためのニューラルフレームワーク

DNABERT: ゲノム内の DNA 言語に向けた、Transformer ベースの事前学習済み双方向エンコーダー表現モデル

Kiwi（インテリジェント韓国語形態素解析器）

PatrickStar は、NLP の事前学習モデルをより大きく、高速で、環境に優しくし、すべての人に AI を民主化します。

ファインチューニングを使用してRAGタスク向けLLMを強化するためのフレームワーク。

近年におけるニューラルネットワークモデルの解釈可能性に関する、高被引用・主要学会の論文集（コード付き）

オールインワンのテキスト重複排除ツール

Word Sense Disambiguation (WSD) 技術の Python 実装。