mediapipe

ライブおよびストリーミングメディア向けのクロスプラットフォーム対応のカスタマイズ可能なMLソリューション。

様々なフレームワーク間で相互変換されたモデルを保存するためのリポジトリ。サポートされるフレームワークは、TensorFlow, PyTorch, ONNX, OpenVINO, TFJS, TFTRT, TensorFlowLite (Float32/16/INT8), EdgeTPU, CoreMLです。

Web Augmented Reality。画像追跡、顔追跡、Tensorflow.js

TouchDesigner 向けの GPU 高速化 MediaPipe プラグイン

MediaPipeを実行するためのUnityプラグイン

XR Animator：System Animator Online を活用した、AI ベースの全身モーションキャプチャおよび拡張現実（XR）ソリューション

GNU/Linux 環境でウェブカメラの背景を偽装するツール。背景のぼかし、アニメーション背景、カラーマップ効果、ホログラム効果、オンデマンド処理をサポートしています。

画像処理やAI機能を簡単に実行できるようにするコンピュータービジョンパッケージです。コアには OpenCV と Mediapipe ライブラリを使用しています。

Mediapipe と Rigify を使用した Blender でのリアルタイムモーショントラッキング

長尺の YouTube 動画を 9:16 のショート動画に変換する Windows デスクトップアプリ — AI によるハイライト検出、顔追跡ポートレートリフレーム、単語単位の字幕付き。

Unity 向けの TensorFlow Lite サンプル

素手で画面上のオブジェクトを操作します。AI向けのWebカメラ駆動型ハンドトラッキングインターフェース。ヘッドセットやコントローラーは不要です。

Web 上でのリアルタイム MMD モーションキャプチャ

姿勢推定とランドマーク生成技術を用いた自動3Dキャラクターアニメーション

PennyWiseは、オンデバイスAIアシスタントを活用してトランザクションSMSメッセージを自動的に読み取り、整理された財務データに変換します。手動入力なし、クラウド処理なしで、完全なプライバシーを保護します。

ブラウザ内のライブビデオストリームにバーチャル背景を追加するデモ