parquet

QuestDB는 고성능 오픈소스 시계열 데이터베이스입니다

Apache Arrow는 빠른 데이터 교환 및 인메모리 분석을 위한 범용 컬럼형 포맷이자 다중 언어 툴박스입니다.

AI 및 멀티모달 워크로드를 위한 고성능 데이터 엔진. 모든 규모에서 이미지, 오디오, 비디오 및 정형 데이터를 처리합니다.

Apache Arrow의 공식 Rust 구현체

단 한 줄의 코드도 작성하지 않고 변경이 적은 데이터셋을 위한 완전한 기능의 API를 생성합니다.

배치 처리, 스트림 처리, 연산 집약적 AI 워크로드를 통합하는 Rust로 작성된 Apache Spark 드롭인 대체재입니다.

Apache Parquet Java

인간과 에이전트를 위한 가장 빠른 비즈니스 인텔리전스 도구.

Apache Parquet 포맷

Parseable은 데이터 레이크 아키텍처 기반의 Rust로 구축된 오픈소스 통합 인프라 가관측성 플랫폼입니다. 앱, 에이전트, 시스템 전반의 로그, 메트릭, 추적, 이벤트를 추적하며 열 기반 텔레메트리 압축을 통해 스토리지 비용을 최대 90%까지 절감합니다.

Apache Drill은 자체 설명 데이터(self-describing data)를 위한 분산 MPP 쿼리 레이어입니다.

Postgres 테이블에 대한 실시간 분석

Petastorm 라이브러리는 Apache Parquet 형식의 데이터셋을 사용하여 단일 장치 또는 분산 환경에서 딥러닝 모델의 학습 및 평가를 가능하게 합니다. Tensorflow, Pytorch, PySpark 같은 ML 프레임워크를 지원하며 순수 Python 코드에서도 사용할 수 있습니다.

S3, PostgreSQL, SQLite, Apache Iceberg 및 Delta Lake를 지원하는 Apache Kafka® 호환 브로커

60개 이상의 도구(예: GitHub, Notion, Airtable)를 위한 단일 SQL 인터페이스. MCP를 통해 모든 LLM에 연동

Tonbo는 서버리스 및 엣지 런타임을 위한 임베디드 데이터베이스입니다.

cryo는 블록체인 데이터를 parquet, csv, json 또는 python 데이터프레임으로 추출하는 가장 쉬운 방법입니다.

Postgres 호환성을 제공하는 오픈소스 Snowflake 및 Fivetran 대안

OLake - 테이블 최적화 기능(OLake Fusion)을 포함하여 데이터베이스, Kafka, S3를 Apache Iceberg로 가장 빠르게 복제합니다. 실시간 분석을 위한 효율적이고 신속하며 확장 가능한 데이터 수집. 지원 소스: Postgres, MongoDB, MySQL, Oracle, MSSql, DB2, Kafka, S3.

Quilt는 버전 관리와 맥락이 풍부한 데이터 패키지를 통해 팀과 AI가 데이터를 찾고, 신뢰하고, 재사용할 수 있도록 돕는 AWS 기반 과학 데이터 관리 플랫폼입니다.

Apache Parquet 파일을 조회하고 쿼리하기 위한 간단한 Windows 데스크톱 애플리케이션

ClickBench: 분석용 데이터베이스 벤치마크

ADAM은 Apache Avro, Apache Spark, Apache Parquet을 사용하여 구축된 특수 파일 형식을 갖춘 유전체 분석 플랫폼입니다. Apache 2 라이선스가 적용됩니다.

Jupyter에서 빠르고 대화형인 지리 공간 데이터 시각화를 제공합니다.

JavaScript용 parquet 파일 파서

.NET용 ETL 프레임워크 (CSV, Flat, Xml, JSON, Key-Value, Parquet, Yaml, Avro 형식 파일 파서/라이터)

80개 이상의 DevOps 및 데이터 CLI 도구 - AWS, GCP, GCF Python Cloud Functions, 로그 익명화 도구, Spark, Hadoop, HBase, Hive, Impala, Linux, Docker, Spark 데이터 변환기 및 검증기(Avro/Parquet/JSON/CSV/INI/XML/YAML), Travis CI, AWS CloudFormation, Elasticsearch, Solr 등

Parquet 파일을 읽고 쓰기 위한 고성능 Go 패키지

Graph Data Science: Pandas, NetworkX, RAPIDS, RDFlib, pySHACL, PyVis, morph-kgc, pslpython, pyarrow 등과 통합되어 지식 그래프를 구축하기 위한 Python 추상화 계층

PostgreSQL 내에서 S3, Azure Blob Storage, Google Cloud Storage, http(s), 로컬 파일 또는 표준 입출력 스트림 간의 Parquet 데이터 복사 지원