distributed-computing

Data Algorithms 도서를 위한 MapReduce, Spark, Java 및 Scala

:rocket: R 패키지: future: 누구나 R에서 사용할 수 있는 통합 병렬 및 분산 처리

LizardFS는 GPLv3 라이선스가 적용된 오픈 소스 분산 파일 시스템입니다.

Argo Workflows, Tekton Pipelines, Apache Airflow 등 다양한 워크플로 엔진에서 워크플로를 구축하고 관리하기 위한 통합 인터페이스.

lichess.org를 위한 분산형 Stockfish 분석

PyTorch를 가속화하는 Bagua

분산 시스템 리소스 Awesome 목록

클라우드의 힘을 활용하세요

유용한 병렬 컴퓨팅 리소스들을 엄선한 목록

Talos 네트워크용 GPU 워커 클라이언트. Talos 계정과 연동하여 WebSocket을 통해 오픈 모델 추론 작업을 수행하고 가동 시간을 보고하여 보상을 받습니다.

Backend.AI는 컨테이너 기반의 컴퓨팅 클러스터 플랫폼으로, 주요 컴퓨팅/ML 프레임워크와 다양한 프로그래밍 언어를 지원하며 CUDA GPU, ROCm GPU, Gaudi NPU, Google TPU, GraphCore IPU 등 다양한 이기종 가속기를 플러그인 방식으로 지원합니다.

Random Forest 및 Gradient Boosted Decision Trees와 같은 결정 트리 모델을 학습, 평가, 해석 및 운영화하기 위한 라이브러리

연합 학습(Federated Learning)을 위한 실험용 플랫폼.

실제 트래픽, 부분적 장애, 보안 검토 및 변화하는 요구사항을 견뎌야 하는 시스템을 설계하는 엔지니어를 위한 소스 기반 강좌 및 아키텍처 참고서로, 엔터프라이즈 시스템 설계, 분산 시스템, AI 시스템, 사이버 보안, 신뢰성, 클라우드, HPC, 엣지 및 미션 크리티컬 인프라를 아우릅니다.

Apache Spark 기반의 간소화된 경량 ETL 프레임워크입니다.

HPC 시스템용 서브 노드 작업 스케줄러

MPI 기반 애플리케이션(분산 학습, HPC 등)을 위한 Kubernetes Operator

Self-hosted AI agent OS. Your memory, chat, agents, and files stay on hardware you own, offline by default, cloud by choice. Offline AI memory (taOSmd), self-hosted multi-framework group chat, a full web desktop + app store, and auto-clustering across the consumer hardware you already have (Orange/Raspberry Pi, Mac mini, gaming PC).