distributed-computing

MapReduce, Spark, Java et Scala pour le livre Data Algorithms.

Package R : future : Traitement parallèle et distribué unifié en R pour tous

LizardFS est un système de fichiers distribué open source sous licence GPLv3.

Interface unifiée pour construire et gérer des workflows sur différents moteurs tels qu'Argo Workflows, Tekton Pipelines et Apache Airflow.

Analyse distribuée par Stockfish pour lichess.org.

Bagua accélère PyTorch

Liste de ressources sur les systèmes distribués

Exploitez la puissance du cloud

Une liste organisée de ressources exceptionnelles sur le calcul parallèle.

Client worker GPU pour le réseau Talos. Se connecte à votre compte Talos, traite des tâches d'inférence de modèles ouverts via WebSocket et rapporte le temps de disponibilité pour les paiements.

Une bibliothèque pour entraîner, évaluer, interpréter et industrialiser des modèles de forêts de décision tels que Random Forest et Gradient Boosted Decision Trees

Backend.AI est une plateforme de calcul cluster conteneurisée et rationalisée qui héberge des frameworks de calcul/ML populaires et des langages de programmation variés, avec un support d’accélérateurs hétérogènes pluggables, incluant CUDA GPU, ROCm GPU, Gaudi NPU, Google TPU, GraphCore IPU et d’autres NPUs.

Une plateforme expérimentale pour l'apprentissage fédéré.

Un cours ancré dans la source et une référence architecturale pour les ingénieurs concevant des systèmes capables de survivre au trafic réel, aux pannes partielles, aux examens de sécurité et à l'évolution des exigences, couvrant la conception de systèmes d'entreprise, les systèmes distribués, les systèmes d'IA, la cybersécurité, la fiabilité, le cloud, le HPC, l'edge et les infrastructures critiques.

Un framework ETL simplifié et léger basé sur Apache Spark

Planificateur convivial pour les tâches de sous-nœuds dans les systèmes HPC.

Opérateur Kubernetes pour les applications basées sur MPI (entraînement distribué, HPC, etc.)

Self-hosted AI agent OS. Your memory, chat, agents, and files stay on hardware you own, offline by default, cloud by choice. Offline AI memory (taOSmd), self-hosted multi-framework group chat, a full web desktop + app store, and auto-clustering across the consumer hardware you already have (Orange/Raspberry Pi, Mac mini, gaming PC).