pipeline

Bibliothèque Python pour créer des pipelines de données avec la programmation fonctionnelle en chaîne

cubestudio开源云原生一站式机器学习/深度学习/大模型AI平台/MaaS/mlops/人工智能平台/训推平台，算法全链路流程，多租户，算力租赁平台，token中转，拖拉拽任务流pipeline编排，多机多卡分布式训练，超参搜索，推理服务，VGPU虚拟化，云边端协同，边缘计算，自动化标注平台，deepseek等大模型sft微调/奖励模型/强化学习训练，vllm/ollama/mindie大模型多机推理，私有知识库llmops智能体，AI模型市场，支持国产异构算力调度,昇腾/寒武纪/海光/摩尔/沐曦等，支持ib/roce/RDMA，信创支持

🔮 Instill Core est un outil d'infrastructure IA full-stack pour l'orchestration de données, de modèles et de pipelines, conçu pour rationaliser chaque aspect de la création d'applications axées sur l'IA.

Un framework de calcul parallèle basé sur des graphes de flux, générique, sans dépendances tierces et multiplateforme.

Le moteur SQL de streaming unifié le plus rapide dans un seul binaire C++. ⚡ Latence en millisecondes. Débit supérieur à 100 Go/s. Calculez en continu le contexte en temps réel à partir de flux, journaux, métriques, événements et CDC.

Une bibliothèque légère de traitement de flux pour Go

Un framework d'apprentissage automatique pour Julia.

XLS : Synthèse matérielle accélérée

Boîte à outils Go pour une concurrence propre, composable et basée sur les canaux.

Science intensive en données pour tous.

Extensions PyTorch pour le prototypage rapide en R&D et le farming sur Kaggle.

Plateforme d'orchestration Hop

Utilitaire de traçage en temps réel pour terminal/console avec entrée de données via stdin

Pipeline d'analyse de séquençage ARN utilisant STAR, RSEM, HISAT2 ou Salmon avec comptage de gènes/isoformes et contrôle qualité approfondi.

Une boîte à outils de pipeline axée sur R pour la reproductibilité et le calcul haute performance

Inférence, ingestion et indexation hautement performantes, modulaires, sécurisées en mémoire et prêtes pour la production, construites en Rust 🦀

BlueKing Standard Operations (SOPS)

Une micro-bibliothèque de composants de flux pour construire des pipelines de traitement JSON et JSONC personnalisés avec une empreinte mémoire minimale : analysez, filtrez et transformez des fichiers JSON bien plus volumineux que la mémoire disponible grâce à une API de jetons inspirée de SAX, sur Node.js ou Web Streams.

Outil en ligne de commande multiplateforme pour l'exécution de tâches en parallèle.

Pipelines robustes, flexibles et économes en ressources utilisant Go et la ligne de commande.

Workflows déclaratifs orientés fonction de type Make pour R

Une plateforme open-source de développement de pipelines ML

Pipelines d'automatisation légers. Apportez le CI/CD aux petits projets. Auto-hébergé, léger, uniquement en CLI.

Un tableau de bord pour Tekton.

Un moteur de workflow facile à utiliser prenant en charge WDL, CWL et une API Python. Il est évolutif, efficace et multiplateforme (Linux/macOS).

Un support flexible et performant pour les modèles de machine learning (cadre de déploiement de service PaddlePaddle).

Neum AI est un framework de premier ordre pour gérer la création et la synchronisation d'embeddings vectoriels à grande échelle.

Langage déclaratif pour des workflows d'IA composables. Outil de développement pour agents et humains.

LinGoose est un framework Go pour créer des applications IA/LLM performantes

Plumber détecte les problèmes de sécurité CI/CD dans vos workflows GitHub et leur attribue un score.