spark

LakeSoul은 차세대 BI 및 AI 워크로드를 지원하는 엔드투엔드 실시간 클라우드 네이티브 Lakehouse 프레임워크로, 빠른 데이터 수집, 동시 업데이트, 증분 분석, 멀티모달 데이터 처리 및 벡터 검색을 제공합니다.

빅데이터 학습, 제로 베이스 빅데이터 학습, 각 단계별 학습 동영상 및 면접 자료 포함

Kubernetes에서 Apache Spark 애플리케이션의 라이프사이클을 관리하기 위한 쿠버네티스 오퍼레이터입니다.

Apache Spark용 REST 작업 서버

소비자용 및 이기종 하드웨어를 위한 LLM 추측적 추론 서버

:herb: Spring Boot 기반 빠른 학습 예제, rabbitmq(지연 큐), Kafka, jpa, redis, oauth2, swagger, jsp, docker, k3s, k3d, k8s, mybatis 암복호화 플러그인, 예외 처리, 로그 출력, 멀티 모듈 개발, 멀티 환경 패키징, 캐시, 크롤러, jwt, GraphQL, dubbo, zookeeper, Async 등 개인 연동 오픈소스 프레임워크 통합:pushpin:

선전 지하철 빅데이터 승객 흐름 분석 시스템🚇🚄🌟

✨Spark는 Go로 작성된 웹 기반 크로스플랫폼 완전 기능을 갖춘 원격 관리 도구(RAT)로, 어디서나 모든 장치를 제어할 수 있습니다.

다중 SQL 백엔드를 지원하는 빠르고 정확하며 확장 가능한 확률적 데이터 연계

Apache Kyuubi는 데이터 웨어하우스와 레이크하우스에서 서버리스 SQL을 제공하기 위한 분산 및 멀티태넌트 게이트웨이입니다.

TransmogrifAI는 최소한의 수동 튜닝으로 Apache Spark 상에서 모듈화되고 재사용 가능하며 강력한 타입의 머신러닝 워크플로우를 구축하기 위한 AutoML 라이브러리입니다.

YTsaurus는 확장 가능하고 내결함성을 갖춘 오픈소스 빅데이터 플랫폼입니다.

쿼드콥터에 초점을 맞춰 DJI 제품의 펌웨어를 다루기 위한 도구

분산 컴퓨팅을 위한 통합 인터페이스. Fugue는 코드 재작성 없이 Spark, Dask, Ray에서 SQL, Python, Pandas, Polars 코드를 실행합니다.

Scala를 위한 컴파일 타임 언어 통합 쿼리(LINQ)

.NET for Apache® Spark™는 .NET 개발자가 Apache Spark™에 쉽게 접근할 수 있도록 해줍니다.

GATK 버전 4 이상을 위한 공식 코드 저장소

Apache Spark와 Apache Cassandra를 연결하는 커넥터

빅데이터 지식 저장소로 데이터웨어하우스 모델링, 실시간 연산, 빅데이터, 데이터 중대(Mid-end), 시스템 설계, Java, 알고리즘 등을 다룹니다.

분산 컴퓨팅 프레임워크(예: Spark)용 Auron 가속기는 네이티브 벡터화 실행을 활용하여 쿼리 처리를 가속화합니다

백엔드(Java, Golang) 풀스택 지식 아키텍처 시스템 요약

ApacheCN 오픈소스 조직: 공지, 소개, 멤버, 활동, 소통 방식

2,000개가 넘는 데이터 엔지니어 면접 질문 모음

Elassandra = Elasticsearch + Apache Cassandra

IPython / Jupyter 노트북 형태의 빅데이터 분석 및 머신러닝을 위한 Apache Spark & Python (pySpark) 튜토리얼

Jupyter를 위한 Scala 커널

Apache Spark 내부 구조

MLeap: ML 파이프라인을 프로덕션에 배포.

Pandas, Dask, cuDF, Dask-cuDF, Vaex, PySpark를 활용한 간편한 애자일 데이터 준비 워크플로

Nessie: Git과 유사한 시맨틱을 제공하는 데이터 레이크용 트랜잭션 카탈로그