dataops

Định dạng Open Lakehouse cho AI đa phương thức. Chuyển đổi từ Parquet chỉ trong 2 dòng mã để truy cập ngẫu nhiên nhanh hơn 100 lần, chỉ mục vector và quản lý phiên bản dữ liệu. Tương thích với Pandas, DuckDB, Polars, Pyarrow và PyTorch với nhiều tích hợp sắp ra mắt.

Redpanda Console là một giao diện người dùng thân thiện với nhà phát triển để quản lý khối lượng công việc Kafka/Redpanda của bạn. Console cung cấp cho bạn một cách tiếp cận đơn giản, tương tác để có cái nhìn trực quan về các chủ đề (topics), che giấu dữ liệu (data masking), quản lý nhóm người tiêu dùng (consumer groups) và khám phá dữ liệu thời gian thực với tính năng gỡ lỗi du hành thời gian (time-travel debugging).

Khung chuyển đổi dữ liệu có khả năng mở rộng và hiệu quả - tương thích ngược với dbt.

Thư viện ghi nhật ký dữ liệu mã nguồn mở cho các mô hình machine learning và data pipeline. 📚 Cung cấp khả năng hiển thị chất lượng dữ liệu & hiệu suất mô hình theo thời gian. 🛡️ Hỗ trợ thu thập dữ liệu bảo vệ quyền riêng tư, đảm bảo an toàn & tính mạnh mẽ. 📈

Meltano: công cụ tích hợp dữ liệu khai báo theo mã nguồn (code-first) hỗ trợ các ý tưởng sản phẩm tích hợp dữ liệu và ML. Tạm biệt việc tự viết, bảo trì và mở rộng các tích hợp API của riêng bạn.

Giải pháp quan sát dữ liệu gốc dbt dành cho các kỹ sư dữ liệu & phân tích. Theo dõi các đường ống dữ liệu của bạn trong vài phút. Có sẵn dưới dạng tự lưu trữ hoặc dịch vụ đám mây với các tính năng cao cấp.

Kafka Docker phục vụ phát triển. Kafka, Zookeeper, Schema Registry, Kafka-Connect, và hơn 20 connector

Nền tảng DataOps & AIOps Cloud Native | Nền tảng vận hành thông minh dữ liệu gốc đám mây

Hỗ trợ Ontology DataOps linh hoạt dựa trên Flink, DataX và Flink-CDC với Web-UI.

📙 Danh mục Data Catalogs và nền tảng Observability tuyệt vời.

Optimus là công cụ điều phối quy trình làm việc dễ sử dụng, đáng tin cậy và hiệu năng cao cho việc chuyển đổi dữ liệu, mô hình hóa dữ liệu, đường ống dữ liệu và quản lý chất lượng dữ liệu.

Tenzir là công cụ đường ống dữ liệu dành cho các nhóm bảo mật.

Công cụ theo dõi, trực quan hóa, giải thích, phát hiện độ lệch và bảng điều khiển cho AI/ML/Dữ liệu của Polyaxon.