distributed-training

Apprenez à développer, déployer et itérer sur des applications ML de qualité production.

La plus grande collection d'encodeurs/backbones d'images PyTorch. Inclut des scripts d'entraînement, d'évaluation, d'inférence, d'exportation et des poids pré-entraînés : ResNet, ResNeXT, EfficientNet, NFNet, Vision Transformer (ViT), MobileNetV4, MobileNet-V3 & V2, RegNet, DPN, CSPNet, Swin Transformer, MaxViT, CoAtNet, ConvNeXt, et plus encore.

PArallel Distributed Deep LEarning : Framework de machine learning issu de la pratique industrielle (cadre principal de PaddlePaddle, entraînement haute performance distribué et sur machine unique, et déploiement multiplateforme pour le deep learning et le machine learning).

Bibliothèque LLM et SLM puissante et facile à utiliser avec un impressionnant catalogue de modèles.

Plateforme de calcul IA pour les équipes de pointe. SkyPilot transforme les ressources de calcul fragmentées en un supercalculateur IA unique, permettant aux équipes de développer plus rapidement leur propre intelligence artificielle.

Construire, gérer et déployer des systèmes d'IA/ML.

Démocratiser l'apprentissage par renforcement pour les LLM

Fengshenbang-LM est un écosystème de modèles open source dirigé par le centre de recherche en informatique cognitive et en langage naturel de l'IDEA, servant d'infrastructure pour l'AIGC et l'intelligence cognitive en chinois.

FEDML - La bibliothèque ML unifiée et évolutive pour l'entraînement distribué à grande échelle, le déploiement de modèles et l'apprentissage fédéré. FEDML Launch, un ordonnanceur multi-cloud, permet d'exécuter tout travail d'IA sur n'importe quel cloud GPU ou cluster sur site. Basée sur cette bibliothèque, TensorOpera AI (https://TensorOpera.ai) est votre plateforme d'IA générative à grande échelle.

Determined est une plateforme d'apprentissage automatique open source qui simplifie l'entraînement distribué, le réglage des hyperparamètres, le suivi des expériences et la gestion des ressources. Compatible avec PyTorch et TensorFlow.

Apprentissage profond décentralisé avec PyTorch, conçu pour entraîner des modèles sur des milliers de volontaires à travers le monde.

DLRover : un système d'apprentissage profond distribué automatique

Bibliothèque de communications collectives avec diverses primitives pour l'entraînement multi-machines.

DeepRec est un framework d'apprentissage profond pour la recommandation haute performance basé sur TensorFlow, hébergé en incubation par la LF AI & Data Foundation.

Supports de cours sur les systèmes d'apprentissage profond efficaces

🌾 OAT : un cadre de recherche convivial pour l'alignement en ligne des LLM, incluant l'apprentissage par renforcement, l'apprentissage des préférences, etc.

Meilleures pratiques et guides pour écrire du code de formation distribuée PyTorch

Un moteur d'apprentissage par renforcement asynchrone pour le post-entraînement omnimodal à grande échelle