unstructured-data

🦉 データバージョン管理とML実験

高品質なデータセットとビジュアルAIモデルの洗練

LLMを使用した非構造化データからのNeo4jグラフ構築

エージェンティックLLMを活用したデータ処理およびETLのためのシステム

Towheeは、ニューラルデータ処理パイプラインをシンプルかつ高速化することに特化したフレームワークです。

非構造化データのためのコンテキストレイヤー：S3、GCS、Azure 上の型付き、バージョン管理されたデータセット

画像検索、音声検索、分子検索、動画解析、質問応答システム、NLP など、あらゆる非構造化データを処理します。

🔮 Instill Coreは、データ、モデル、パイプラインのオーケストレーションを行うフルスタックAIインフラストラクチャツールであり、多用途なAIファーストアプリケーション構築のあらゆる側面を効率化するように設計されています。

オンプレミスで OCR 不要の非構造化データ抽出、マークダウン変換、ベンチマーク用のツールキット (https://idp-leaderboard.org/)

ContextGem: ドキュメントからの簡単な LLM 抽出

Nomic 開発者 API SDK

高速で効率的な非構造化データ抽出。Rustで記述され、多くの言語向けのバインディングを備えています。

構造化データおよび非構造化データに対して、統一された SQL（MySQL 互換）を使用したアップサートとベクトルクエリをサポートし、高コンカレンシーと超低レイテンシの要件を満たす、マルチモーダルベクトルデータベース。

データに対する最適化されたエージェント型およびLLMの一括処理

ビジョン言語モデルを活用し、複雑なドキュメントからクリーンなデータを抽出する ⚡

開発者とハッカーのためのオープンソース文書インテリジェンスプラットフォーム - エージェント時代のDMS

Pythonを基盤としたビジュアルデータ前処理ツール

データフレームから非構造化データセットを対話的に探索する。

大規模なデータリポジトリ向けの超高速データバージョン管理システム。Gitのように使え、oxenのようにプッシュとプルができる。

データエージェントの進歩に関する継続的に更新される論文リスト。論文「A Survey of Data Agents: Emerging Paradigm or Overstated Hype?」の関連リポジトリです。

NucliaDB：RAG向けのAI検索データベース