distributed-computing

MapReduce, Spark, Java und Scala für das Buch "Data Algorithms"

:rocket: R-Paket: future: Einheitliche parallele und verteilte Verarbeitung in R für jedermann

LizardFS ist ein unter der GPLv3 lizenziertes, verteiltes Open-Source-Dateisystem.

Einheitliche Schnittstelle zum Erstellen und Verwalten von Workflows auf verschiedenen Workflow-Engines wie Argo Workflows, Tekton Pipelines und Apache Airflow.

Verteilte Stockfish-Analyse für lichess.org

Bagua beschleunigt PyTorch

Awesome-Liste von Ressourcen für verteilte Systeme

Entfesseln Sie die Leistung der Cloud

Eine kuratierte Liste von hervorragenden Ressourcen zum parallelen Rechnen

GPU-Worker-Client für das Talos-Netzwerk. Koppelt sich mit Ihrem Talos-Konto, bedient Open-Model-Inferenzjobs über ein WebSocket und meldet die Betriebszeit für Auszahlungen.

Backend.AI ist eine schlanke, containerbasierte Rechencluster-Plattform, die gängige Computing/ML-Frameworks und verschiedene Programmiersprachen hostet. Sie bietet steckbare Unterstützung für heterogene Beschleuniger wie CUDA-GPU, ROCm-GPU, Gaudi-NPU, Google-TPU, GraphCore-IPU und andere NPUs.

Eine Bibliothek zum Trainieren, Evaluieren, Interpretieren und Produktiv-Machen von Entscheidungsforst-Modellen wie Random Forest und Gradient Boosted Decision Trees.

Eine experimentelle Plattform für Föderiertes Lernen.

Ein quellbasierter Kurs und eine Architekturreferenz für Ingenieure, die Systeme entwerfen, welche echtem Datenverkehr, Teilausfällen, Sicherheitsüberprüfungen und sich ändernden Anforderungen standhalten müssen. Deckt Unternehmenssystemdesign, verteilte Systeme, KI-Systeme, Cybersicherheit, Zuverlässigkeit, Cloud, HPC, Edge und kritische Infrastrukturen ab.

Ein vereinfachtes, leichtgewichtigenes ETL-Framework basierend auf Apache Spark

Benutzerfreundlicher Scheduler für Sub-Node-Aufgaben in HPC-Systemen.

Kubernetes-Operator für MPI-basierte Anwendungen (verteiltes Training, HPC usw.)

Self-hosted AI agent OS. Your memory, chat, agents, and files stay on hardware you own, offline by default, cloud by choice. Offline AI memory (taOSmd), self-hosted multi-framework group chat, a full web desktop + app store, and auto-clustering across the consumer hardware you already have (Orange/Raspberry Pi, Mac mini, gaming PC).