云端深度学习框架TensorFlow读取数据IO的高效方式

  • 时间:
  • 浏览:1
  • 来源:幸运飞艇_幸运飞艇官方

本文通过读取有另有有4个简单的CSV文件为例,帮助另一个人快速了解咋样使用TensorFlow高效的读取数据。CSV文件如下:

最近通过观察PAI平台上TensoFlow用户的运行情况汇报,发现另一个人在数据IO这方面还是有比较大的困惑,主如果这种就是同学这麼很好的理解本地执行TensorFlow代码和分布式云端执行TensorFlow的区别。本地读取数据是server端直接从client端获得graph进行计算,而云端服务server在获得graph如果还时要将计算架构设计 到各个worker处置(具体原理都可不还可以 参考视频教程-Tensorflow高级篇:https://tianchi.aliyun.com/competition/new_articleDetail.html)。