An example to show how to run image classification based on v2 API on cluster
Created by: qingqing01
这个例子是希望告诉大家如何在集群上训练大规模图像分类,当前基于MPI集群,数据基于ImageNet,集群上的数据打batch适合一些,所以建议对数据打batch。通过集群的例子,重点希望优化的是v2 API图像分类的性能,需要评估下,可能需要优化的是数据IO那块。
另外,希望通过这个例子和PaddlePaddle/models里图像分类的例子对图像预处理这块的代码形成一个比较规范的模块,当前python/paddle/utils/image_util.py
和 python/paddle/utils/image_multiproc.py
是基于DataProvider的,一些操作也不是很犯规,希望通过这两个例子,把图像预处理一些通用的操作形成规范的代码,方便用户使用。