apache-spark

Nền tảng kỹ thuật AI mã nguồn mở dành cho các agent, LLM và mô hình ML. MLflow cho phép các nhóm ở mọi quy mô gỡ lỗi, đánh giá, giám sát và tối ưu hóa các ứng dụng AI chất lượng sản xuất đồng thời kiểm soát chi phí và quản lý quyền truy cập vào các mô hình và dữ liệu.

lakeFS - Quản lý phiên bản dữ liệu cho data lake của bạn | Git cho dữ liệu

Thư viện Python Machine Learning đơn giản và phân tán, chuyển đổi các thuật toán ML cho Spark

Giải pháp thay thế Apache Spark thả nổi được viết bằng Rust, hợp nhất xử lý hàng loạt, xử lý luồng và khối lượng công việc AI đòi hỏi tính toán cao.

Kubernetes operator để quản lý vòng đời của các ứng dụng Apache Spark trên Kubernetes.

.NET for Apache® Spark™ giúp các nhà phát triển .NET dễ dàng tiếp cận Apache Spark™.

Docker image cho Apache Spark

Feathr – Một nền tảng kỹ thuật dữ liệu và AI thống nhất, có khả năng mở rộng dành cho doanh nghiệp

Danh sách tổng hợp các gói và tài nguyên tuyệt vời cho Apache Spark.

Cấu trúc bên trong của Apache Spark

Đây là kho lưu trữ GitHub cho sách Learning Spark: Phân tích dữ liệu tốc độ cao [Phiên bản thứ 2]

GraphFrames là một gói dành cho Apache Spark cung cấp các đồ thị dựa trên DataFrame

Sách MapReduce, Spark, Java và Scala cho Thuật toán dữ liệu

Giao diện R cho Apache Spark

Liên kết ngôn ngữ C# và F# cùng các tiện ích mở rộng cho Apache Spark

Triển khai Apache Parquet được quản lý hoàn toàn

Kho lưu trữ này chứa mã phát triển cho sparkMeasure, một thư viện phân tích và khắc phục sự cố hiệu năng Apache Spark. Nó đơn giản hóa việc thu thập, tổng hợp và xuất các chỉ số tác vụ/giai đoạn của Spark, được thiết kế cho việc sử dụng thực tế bởi các nhà phát triển và kỹ sư dữ liệu trong các quy trình phân tích tương tác, kiểm thử và giám sát sản xuất.

Các phương thức pyspark giúp nâng cao năng suất lập trình viên

Công cụ dòng lệnh để khởi chạy các cụm Apache Spark.

Danh sách về Apache Kafka

Dịch vụ web REST để chấm điểm thời gian thực thực sự (<1 ms) cho các mô hình Scikit-Learn, R và Apache Spark