pipeline

Thư viện Python để tạo các pipeline dữ liệu bằng lập trình hàm chuỗi (chain functional programming).

cubestudio là nền tảng AI/ML/DL/MaaS/MLOps mã nguồn mở, hỗ trợ quy trình thuật toán toàn diện, đa người dùng, cho thuê tài nguyên tính toán, chuyển tiếp token, lập lịch pipeline kéo thả, huấn luyện phân tán đa máy đa card, tìm kiếm siêu tham số, dịch vụ suy luận, ảo hóa VGPU, phối hợp đám mây-cạnh, tính toán biên, gán nhãn tự động, tinh chỉnh (SFT) các mô hình lớn như DeepSeek, suy luận đa máy với vLLM/Ollama/Mindie, tri thức nội bộ LLMOps, chợ mô hình AI, hỗ trợ tính toán dị thể nội địa (Ascend, Cambricon, v.v.) và RDMA.

🔮 Instill Core là một công cụ hạ tầng AI toàn diện dành cho việc điều phối dữ liệu, mô hình và pipeline, được thiết kế để đơn giản hóa mọi khía cạnh trong việc xây dựng các ứng dụng hướng AI đa năng

【Một framework tính toán song song dựa trên luồng dữ liệu, phổ biến, không có phụ kiện bên thứ ba, đa nền tảng, được đưa vào awesome-cpp】 Chào mừng bạn star, fork và giao lưu.

Công cụ SQL truyền dữ liệu hợp nhất nhanh nhất trong một tệp thực thi C++ duy nhất. ⚡ Độ trễ mili giây. Băng thông hơn 100 GB/s. Liên tục tính toán ngữ cảnh thời gian thực từ các luồng dữ liệu, nhật ký, số liệu, sự kiện và CDC.

Thư viện xử lý luồng nhẹ dành cho Go

Một framework học máy bằng Julia

XLS: Tổng hợp phần cứng tăng tốc

Bộ công cụ Go cho xử lý đồng thời sạch, có thể hợp thành và dựa trên channel

Khoa họcintensive dữ liệu cho mọi người.

Các tiện ích mở rộng PyTorch để tạo mẫu R&D nhanh chóng và Kaggle farming

Nền tảng điều phối Hop Orchestration Platform

Một công cụ vẽ đồ thị thời gian thực cho terminal/console với dữ liệu đầu vào từ stdin

Pipeline phân tích trình tự RNA sử dụng STAR, RSEM, HISAT2 hoặc Salmon với số lượng gene/isoform và kiểm tra chất lượng mở rộng.

Bộ công cụ pipeline tập trung vào R để đảm bảo tính tái lập và điện toán hiệu suất cao

Hiệu suất cao, dạng mô-đun, an toàn bộ nhớ và sẵn sàng cho môi trường production với các tính năng suy luận, thu thập và lập chỉ mục được xây dựng bằng Rust 🦀

BlueKing Standard Operations (SOPS)

Một thư viện vi mô gồm các thành phần luồng để xây dựng đường ống xử lý JSON và JSONC tùy chỉnh với dung lượng bộ nhớ tối thiểu — phân tích, lọc và chuyển đổi JSON lớn hơn nhiều so với bộ nhớ khả dụng với API mã thông báo lấy cảm hứng từ SAX, trên Node.js hoặc Web Streams.

Công cụ dòng lệnh đa nền tảng để thực thi các tác vụ song song

Các pipeline mạnh mẽ, linh hoạt và tiết kiệm tài nguyên sử dụng Go và dòng lệnh

Quy trình làm việc khai báo hướng hàm giống Make cho R

Một nền tảng phát triển ML pipeline mã nguồn mở

Các pipeline tự động hóa nhỏ gọn. Mang CI/CD đến cả những dự án nhỏ nhất. Tự lưu trữ, nhẹ, chỉ dùng CLI.

Bảng điều khiển dành cho Tekton!

Một API WDL, CWL và Python hỗ trợ công cụ quy trình làm việc dễ sử dụng. Nó có khả năng mở rộng, hiệu quả và đa nền tảng (Linux/macOS).

Trình phục vụ mô hình học máy linh hoạt, hiệu suất cao (Khung triển khai dịch vụ PaddlePaddle)

Neum AI là framework hàng đầu để quản lý việc tạo và đồng bộ hóa vector embeddings ở quy mô lớn.

Ngôn ngữ khai báo cho các quy trình làm việc AI có thể kết hợp. Công cụ phát triển cho các tác nhân và con người.

LinGoose là một framework Go để xây dựng các ứng dụng AI/LLM tuyệt vời.

Plumber phát hiện các vấn đề bảo mật CI/CD trong GitHub workflows của bạn và cung cấp điểm số đánh giá