distributed-computing

Sách MapReduce, Spark, Java và Scala cho Thuật toán dữ liệu

:rocket: Gói R: future: Xử lý song song và phân tán thống nhất trong R cho mọi người

LizardFS là hệ thống tập tin phân tán mã nguồn mở được cấp phép theo GPLv3.

Giao diện thống nhất để xây dựng và quản lý quy trình làm việc trên các engine khác nhau, như Argo Workflows, Tekton Pipelines và Apache Airflow.

Phân tích Stockfish phân tán cho lichess.org

Bagua giúp tăng tốc PyTorch

Danh sách tổng hợp các tài nguyên về hệ thống phân tán

Giải phóng sức mạnh của đám mây

Danh sách tổng hợp các tài nguyên tính toán song song hữu ích.

Ứng dụng khách GPU worker cho mạng Talos. Kết nối với tài khoản Talos của bạn, phục vụ các tác vụ suy luận mô hình mở qua WebSocket và báo cáo thời gian hoạt động để thanh toán.

Backend.AI là nền tảng cụm máy tính dựa trên container tinh gọn, lưu trữ các framework tính toán/ML phổ biến và nhiều ngôn ngữ lập trình đa dạng, với hỗ trợ tăng tốc không đồng nhất có thể cắm thêm bao gồm CUDA GPU, ROCm GPU, Gaudi NPU, Google TPU, GraphCore IPU và các NPU khác.

Một thư viện để huấn luyện, đánh giá, diễn giải và đưa vào sản xuất các mô hình rừng quyết định như Random Forest và Gradient Boosted Decision Trees.

Nền tảng thử nghiệm cho học máy liên kết (federated learning).

Khóa học và tài liệu tham khảo kiến trúc dành cho các kỹ sư thiết kế hệ thống cần vận hành ổn định trước lưu lượng thực tế, lỗi cục bộ, đánh giá bảo mật và các yêu cầu thay đổi, bao gồm thiết kế hệ thống doanh nghiệp, hệ thống phân tán, hệ thống AI, an ninh mạng, độ tin cậy, cloud, HPC, edge và cơ sở hạ tầng quan trọng.

Một khung ETL đơn giản, nhẹ dựa trên Apache Spark

Trình lập lịch thân thiện với người dùng cho các tác vụ nút con trên hệ thống HPC.

Kubernetes Operator cho các ứng dụng dựa trên MPI (đào tạo phân tán, HPC, v.v.)

Self-hosted AI agent OS. Your memory, chat, agents, and files stay on hardware you own, offline by default, cloud by choice. Offline AI memory (taOSmd), self-hosted multi-framework group chat, a full web desktop + app store, and auto-clustering across the consumer hardware you already have (Orange/Raspberry Pi, Mac mini, gaming PC).