hadoop

データサイエンス用Pythonノートブック：ディープラーニング (TensorFlow, Theano, Caffe, Keras)、scikit-learn、Kaggle、ビッグデータ (Spark, Hadoop MapReduce, HDFS)、matplotlib、pandas、NumPy、SciPy、Pythonの基礎、AWS、および各種コマンドライン。

Luigiは、バッチジョブの複雑なパイプラインを構築するのに役立つPythonモジュールです。依存関係の解決、ワークフロー管理、可視化などを処理します。Hadoopサポートも組み込まれています。

🏆 リアルタイムのノーコード、強力で安全なORM 🚀 バックエンドでコーディング不要のAPIとドキュメントを提供し、フロントエンド(クライアント)がレスポンスJSONをカスタマイズ可能 🏆

大データ入門ガイド :star:

大規模データのためのPresto分散SQLクエリエンジンの公式ホームページ

Apache Hadoop

JVMを使用してディープラーニングモデルをデプロイおよびトレーニングするためのツールのスイート。主な機能には、keras、tensorflow、onnx/pytorch用のモデルインポート、数学コードを実行するためのモジュール式で軽量なc++ライブラリ、およびコアc++ライブラリ上に構築されたJavaベースの数学ライブラリが含まれます。また、samediffも含まれており、これはディープラーニングを実行するためのpytorch/tensorflowライクなライブラリです...

大規模データ向け分散SQLクエリエンジンTrinoの公式リポジトリ（旧称: PrestoSQL）（https://trino.io)

1200以上のDevOps Bashスクリプト - AWS, GCP, Kubernetes, Docker, CI/CD, API, SQL, PostgreSQL, MySQL, Hive, Impala, Kafka, Hadoop, Jenkins, GitHub, GitLab, BitBucket, Azure DevOps, TeamCity, Spotify, MP3, LDAP, コード/ビルドリンティング, Linux/Mac向けのパッケージ管理, Python, Perl, Ruby, NodeJS, Golang, 高度なdotfiles: .bashrc, .vimrc, .gitconfig, .screenrc, tmux..

LinkedInでは、このカリキュラムをエントリーレベルの才能をSREの役割にオンボーディングするために使用しています。

H2Oは、オープンソースで分散型、高速かつスケーラブルな機械学習プラットフォームです。ディープラーニング、Gradient Boosting (GBM) & XGBoost、Random Forest、一般化線形モデル (Elastic Net付きGLM)、K-Means、PCA、一般化加法モデル (GAM)、RuleFit、サポートベクターマシン (SVM)、スタックドアンサンブル、自動機械学習 (AutoML) など。

クラウド上での分析および機械学習のためのデータオーケストレーションツール Alluxio

Apache Hive

Apache Calcite

Apache Ignite

Apache Nutchは、拡張性とスケーラビリティに優れたWebクローラーです。

DataSphereStudio は、データ交換、秘匿化/クレンジング、分析/マイニング、品質測定、可視化、タスクスケジューリングなどのシナリオをカバーする、ワンストップのデータアプリケーション開発・管理ポータルです。

ビッグデータ学習：ゼロからのビッグデータ学習。各段階の学習動画や面接資料を含みます

深セン地下鉄ビッグデータ旅客流動分析システム🚇🚄🌟

Apache Kyuubiは、データウェアハウスやレイクハウス上でサーバーレスSQLを提供する、分散型かつマルチテナント対応のゲートウェイです。

Apache Hadoop Dockerイメージ

Hadoop Windows向けの winutils.exe、hadoop.dll、hdfs.dll のバイナリ。

Apache Drillは、自己記述型データのための分散型MPPクエリ層です

ビッグデータ知識リポジトリ。データウェアハウスのモデリング、リアルタイム計算、ビッグデータ、データ中台、システム設計、Java、アルゴリズムなどを含みます。

Hadoop 上の AI

2000件以上のデータエンジニア面接問題。

高性能なデータストアソリューション

RDBMSとNoSQLの間でデータをシームレスに転送できる、高速で多機能なETLツール

Docker および Kubernetes 向けの 50 以上の DockerHub パブリックイメージ（DevOps、CI/CD、GitHub Actions、CircleCI、Jenkins、TeamCity、Alpine、CentOS、Debian、Fedora、Ubuntu、Hadoop、Kafka、ZooKeeper、HBase、Cassandra、Solr、SolrCloud、Presto、Apache Drill、Nifi、Spark、Consul、Riak）

Taier は、提出、スケジューリング、運用保守、指標情報の表示を行うビッグデータ開発プラットフォームです。