language-model

200以上のLLMを呼び出すための、シンプルで統一された強力なインターフェースを提供する、完全ローカル稼働可能な本番グレードのスーパーSDK。

NLPの論文

Phi2-Chinese-0.2B: 独自の Phi2 中国語小規模モデルをゼロからトレーニングし、langchain を用いたローカルナレッジベースの読み込みによる RAG（検索拡張生成）をサポートします。独自の Phi2 チャットモデルをゼロからトレーニングしよう。

辞書と言語モデルを備えた Connectionist Temporal Classification (CTC) デコーダー

CL-bench: コンテキスト学習のためのベンチマーク

ベクターデータベースと汎用キーバリューストア上に構築された、言語モデル検索エンジン。

Interactive Composition Explorer: コンポージショナルな言語モデルプログラムのためのデバッガー

Azure AI Search と Azure OpenAI の gpt-4o-realtime-preview モデルを使用した RAG により、インタラクティブな音声生成 AI 体験を実現する VoiceRAG パターンのシンプルな実装例

Hugging Face の transformer 内の任意の生成モデル（bloomz-176B/bloom/gpt/bart/T5/MetaICL）における ChatGPT RLHF（人間フィードバックによる強化学習）の実装

事前学習済みの韓国語 GPT-2 모델 (KoGPT2)

ChatGPT PROMPT の分割ツール。リクエストごとに最大 15,000 文字のチャンクを安全に処理するためのツール。

DialogStudio: 対話型 AI のための、最も豊かで多様な統合データセットコレクションおよび指示認識型モデルの構築に向けて

[ICLR 2024] DNABERT-2: マルチスピーシーズゲノム向けの効率的な基盤モデルとベンチマーク

Ollamaサーバーと対話するためのシンプルなJavaライブラリ。