uber/petastorm

Thư viện Petastorm hỗ trợ huấn luyện và đánh giá trên một máy đơn hoặc phân tán các mô hình học sâu từ tập dữ liệu định dạng Apache Parquet. Thư viện hỗ trợ các framework ML như Tensorflow, Pytorch và PySpark, có thể sử dụng từ mã nguồn Python thuần túy.