uber/petastorm

Petastorm 庫支援從 Apache Parquet 格式的資料集進行深度學習模型的單機或分散式訓練與評估。它支援 TensorFlow、PyTorch 和 PySpark 等 ML 框架，並可直接從純 Python 程式碼中使用。