big-data

확장 가능하고 신뢰할 수 있으며 성능이 뛰어난 대규모 시스템의 패턴

ClickHouse®는 실시간 분석 데이터베이스 관리 시스템입니다.

Apache Spark - 대규모 데이터 처리를 위한 통합 분석 엔진

데이터 과학 Python 노트북: 딥러닝(TensorFlow, Theano, Caffe, Keras), scikit-learn, Kaggle, 빅데이터(Spark, Hadoop MapReduce, HDFS), matplotlib, pandas, NumPy, SciPy, Python 기초, AWS 및 다양한 커맨드라인.

Apache Flink

오픈소스 IoT 플랫폼 - 디바이스 관리, 데이터 수집, 처리 및 시각화

탈중앙화된 그래프 데이터 동기화를 위한 오픈소스 사이버 보안 프로토콜

빅데이터 입문 가이드 :star:

빅데이터를 위한 Presto 분산 SQL 쿼리 엔진의 공식 홈페이지

데이터 엔지니어링 쿡북

빅데이터를 위한 분산 SQL 쿼리 엔진 Trino(구 PrestoSQL)의 공식 저장소 (https://trino.io)

수평적 확장성과 고가용성을 갖춘 분산형 고성능 오픈소스 그래프 데이터베이스

Apache Kafka 관리를 위한 오픈소스 웹 UI

데이터 레이크하우스 내부와 외부 모두에서 1초 미만의 분석을 제공하는 세계에서 가장 빠른 오픈 쿼리 엔진입니다. 거의 모든 시나리오를 지원하는 유연성을 갖춘 StarRocks는 다차원 분석, 실시간 분석, 애드혹 쿼리를 위한 동급 최강의 성능을 제공합니다. Linux Foundation 프로젝트입니다.

관측 가능성을 위한 클라우드 네이티브 OSS 검색 엔진

가장 널리 사용되는 Python-to-C 컴파일러

Apache DataFusion SQL 쿼리 엔진

Python, R, Java, C++용 랭킹, 분류, 회귀 및 기타 머신러닝 작업에 사용되는 빠르고 확장 가능하며 고성능인 Gradient Boosting on Decision Trees 라이브러리. CPU 및 GPU 연산을 지원합니다.

Spark, PrestoDB, Flink, Trino, Hive 등의 연산 엔진과 API를 사용하여 Lakehouse 아키텍처를 구축할 수 있는 오픈소스 스토리지 프레임워크

Apache Beam은 배치 및 스트리밍 데이터 처리를 위한 통합 프로그래밍 모델입니다.

H2O는 오픈 소스 분산형 고성능 확장 가능한 머신러닝 플랫폼입니다: 딥러닝, 그래디언트 부스팅(GBM) 및 XGBoost, 랜덤 포레스트, 일반화 선형 모델(Elastic Net이 포함된 GLM), K-Means, PCA, 일반화 가법 모델(GAM), RuleFit, 서포트 벡터 머신(SVM), 스택 앙상블, 자동 머신러닝(AutoML) 등

Arkime은 오픈소스 대규모 전체 패킷 캡처, 인덱싱 및 데이터베이스 시스템입니다.

AI/ML을 위한 오픈소스 피처 스토어

AI 검색 플랫폼

신뢰성을 위해 설계된 직관적인 HTTP/JSON API를 갖춘 매끄러운 멀티 프라이머리 동기화 데이터베이스

SQL, Scala 등을 사용하여 데이터 기반의 대화형 데이터 분석 및 공동 작업 문서를 지원하는 웹 기반 노트북.

Hazelcast는 스트림 처리와 빠른 데이터 저장을 결합한 통합 실시간 데이터 플랫폼으로, 고객이 실시간 인사이트를 위해 이동 중인 데이터에 즉각적으로 대응할 수 있도록 지원합니다.

Apache IoTDB

데이터 중심 파이프라인 및 데이터 버전 관리

Apache Hive