spark

JDK8 ベースの AI チャットボット！WeChat 公式アカウント、Midjourney 描画、シリアルコード交換、web で ChatGPT、Midjourney、Stable Diffusion 描画をサポート、シリアルコード交換、易支付（E-Pays）, 公式アカウント誘導、メール登録🔥

不可欠な Spark 拡張機能とヘルパーメソッド ✨😲

データをより深く理解する！Datavines はメタデータ管理とデータ品質をサポートする次世代データ可観測性プラットフォームです。

Dingo: 包括的な AI データ、モデル、およびアプリケーションの品質評価ツール

「ユーザプロファイルに基づく映画推薦システムの設計と実装」をテーマとした卒業設計プロジェクト。Django フレームワーク（MTV パターン）をベースに構築されており、データベースには MongoDB、MySQL、Redis を使用しています。豆瓣（Douban）プラットフォームからスクレイピングした映画データを基礎データソースとし、ユーザの基本情報や操作履歴などの行動情報に基づいてユーザータグを開発します。また、Hadoop や Spark などのビッグデータコンポーネントを使用して分析・処理を行う推薦システムです。管理システムには Django 標準のものを使用し、simpleui で装飾しています。

MongoDB Spark コネクタ

WeDataSphereは、金融グレードのワンストップ・ビッグデータプラットフォームスイートです。

Apache SparkやKubernetesなどの分散クラスター間でJupyter Notebookがリソースを共有できるようにする、軽量でマルチテナント対応、スケーラブルかつセキュアなゲートウェイ。

データリネージの追跡および可視化ソリューション

Pandas、Polars、Spark、SnowparkのDataFrameを人間味をもって比較するツールなど！

企業や組織向けに最適化された、クロスプラットフォームのリアルタイムコラボレーションクライアント

Apache Spark のパフォーマンスチューニング用 Qubole Sparklens ツール

初心者向けデータエンジニアリングプロジェクト - バッチ版

Apache Spark をベースにした、シンプルで軽量な ETL フレームワーク

💭 Vue 3、Vite8、TypeScript、Naive UI、Pinia(v3)、UnoCSS などの主流技術で構築された、二次開発可能な Chat Bot 単一ラウンド対話 Web 端 MVP プロトタイプテンプレート。🧤 大規模言語モデル API を簡単に統合し、単一ラウンドの AI 質問応答対話モードを採用。毎回独立して応答し文脈不要。SSE タイプライター効果のストリーミング出力をサポートし、markdown-it Mermaid/KaTex/LaTex 数式ハイライトプレビューを統合。星火、智譜、SiliconFlow（硅基流动）、Deepseek V4/V3/R1 ディープシンキング推論モデルのプレビュー、<think> タグ互換、蒸留 skill を包含。💼 カスタマイズが容易で、Chat 系 LLM 製品を迅速に構築可能（サンプルスクリーンショット付き）

テスト環境用のシンプルな Spark スタンドアロンクラスター

ClickHouseネイティブプロトコルJDBC実装

ビッグデータ収集・抽出プラットフォーム。zdh_webはzdhシリーズサービスのビジュアル管理プラットフォームであり、データ収集、スケジューリング、権限管理、承認ワークフロー、プライベートドメインマーケティングなどのモジュールを含みます。

ハイパフォーマンス Spark のサンプル

Polyaxon の AI/ML/データ追跡、視覚化、説明可能性、ドリフト検出、ダッシュボード用エンジン

ECビッグデータ商品リアルタイム推薦システム、Vue + TypeScript + ElementUI + Spring + Spark

Excel ファイルの読み書きを行う Spark プラグイン

セキュリティ分析で使用される、堅牢で柔軟なオープンソースのユーザーおよびエンティティ行動分析（UEBA）フレームワーク。サイバーセキュリティ業界のデータサイエンティストとセキュリティアナリストによって愛情を込めて開発されました。[BETA]

Docker上のJupyterLabインターフェースを使用して独自のクラスターを構築し、Scala、Python (PySpark)、R (SparkR) で Apache Spark を学ぶ :zap:

Pandas または Spark のデータフレームの安定性を監視するツール ⚙︎