Uber 开源深度学习分布训练库 Petastorm

开发四年只会写业务代码，分布式高并发都不会还做程序员？   Uber 近日宣布开源 Petastorm，这是由 Uber ATG 开发的数据访问库，可直接基于数 TB 的 Apache Parquet 格式数据集进行单机或分布式训练和深度学习模型评估。Petastorm支持流行的基于Python的机器学习（ML）框架，如 Tensorflow、Pytorch 和 PySpark ，也可以直接用在

>>阅读原文<<