bigdata

Apache Spark를 위한 C# 및 F# 언어 바인딩 및 확장

데이터 과학을 위한 GUI 기반 Python 코드 생성기로, Jupyter Lab, Jupyter Notebook 및 Google Colab의 확장 프로그램입니다.

TiDB/TiKV 위에서 Apache Spark를 실행하기 위한 TiSpark

LazySquirrel Flink-Boot 스캐폴드는 Flink가 Spring 생태계를 완전히 포용하도록 하여, 개발자가 Java WEB 개발 모드로 분산 실행 스트림 처리 프로그램을 개발할 수 있게 해주며, 경계를 넘는 개발을 더욱 단순하게 만들어 줍니다. LazySquirrel은 개발자가 적은 진입 비용(분산 컴퓨팅 이론 지식과 Flink 프레임워크의 상세 내용을 이해하지 않고도)으로 비즈니스 코드를 빠르게 작성하고 구현할 수 있도록 하는 것을 목표로 합니다. 개발자가 LazySquirrel 스캐폴드를 사용하여 대형 프로젝트를 더욱 민첩하게 개발할 수 있도록, 이 스캐폴드는 기본적으로 Spring 프레임워크를 통합하여 Bean을 관리하며, 마이크로서비스 및 WEB 개발 분야에서 자주 사용되는 프레임워크를 통합하여 개발 속도를 더욱 향상시킵니다. 예를 들어 Mybatis ORM 프레임워크, Hibernate Validator 검증 프레임워크, Spring Retry 재시도 프레임워크 등을 통합하고 있으며, 자세한 내용은 아래의 스캐폴드 기능을 참조하세요.

Akka 기반의 경량 실시간 빅데이터 스트리밍 엔진입니다.

DataWave는 Apache Accumulo를 활용하여 빠르고 안전한 데이터 액세스를 제공하는 수집/쿼리 프레임워크입니다.

시각화 대시보드 솔루션으로, 시각화 편집 엔진을 제공하여 개인이나 기업이 자신만의 시각화 대시보드 앱을 쉽게 맞춤 설정할 수 있도록 지원합니다.

WeDataSphere는 금융 등급의 원스톱 빅데이터 플랫폼 스위트입니다.

고속 토픽 모델링 플랫폼

데이터 계보 추적 및 시각화 솔루션

Datafaker는 대규모 테스트 데이터 및 흐름 테스트 데이터 생성 도구입니다. 데이터를 생성하여 다양한 데이터 소스에 삽입합니다.

AI를 위한 오픈소스 컨텍스트 레이어입니다. 테이블, 토픽, 큐, API를 카탈로그화하고 AI 에이전트에 실제 메타데이터를 제공합니다.

테스트 환경 구축을 위한 간단한 Spark 독립형 클러스터

Apache Hudi 관련 자료 모음

빅데이터 수집 및 추출 플랫폼. zdh_web은 데이터 수집, 스케줄링, 권한 관리, 승인 워크플로우, 프라이빗 마케팅 모듈 등을 포함하는 zdh 서비스의 시각화 관리 플랫폼입니다.

원형 그래프를 구축하기 위한 d3 라이브러리

이커머스 빅데이터 상품 실시간 추천 시스템 (Vue + TypeScript + ElementUI + Spring + Spark)

MinIO 및 RustFS의 오픈 소스 대안으로 설계된 고성능 분산 S3 호환 객체 스토리지