Distributed PaddlePaddle Blog

[helinwang]

• 第一篇：可容错深度学习任务 (wuyi, longfei, yanxu, gongweibao, helin)
  Please see: https://github.com/PaddlePaddle/blog/issues/3
  • 为什么深度学习需要容错
  • etcd是什么，怎么通过它来做容错
  • trainer, pserver, master如何协作(gongweibao)
  • 为什么引入了master，Task Queue的设计
  • see: https://github.com/PaddlePaddle/blog/issues/3
• 第二篇：Go在分布式机器学习系统中的应用。(wuyi, longfei, helin)
  Please see: https://github.com/PaddlePaddle/blog/issues/1
• 第三篇：使用kubernetes调度可容错的深度学习任务 (yanxu, gongweibao)
  Please see: https://github.com/PaddlePaddle/blog/issues/5
  • 如何从非k8s迁移到k8s，代价和好处
  • GPU
• 第四篇：训练数据的存储和传输优化(gongweibao, helin)
  Please see: https://github.com/PaddlePaddle/blog/issues/4
  • 使用recordio
  • 使用分布式存储
  • metadata和task队列
• 第五篇： 异步（第一版没有同步）参数更新性能分析与调优（gradient upload / download frequency, how many pservers）... (zhihong, wuyi, helin, yanxu)
  Please see: https://github.com/PaddlePaddle/blog/issues/2
• 第六篇：构建系统，测试系统的考虑和设计 (helin, weibao)
  Please see: https://github.com/PaddlePaddle/blog/issues/6
  • github上的搭建
  • teamcity
  • docker develop environment

[jacquesqiao]

2，k8s的使用。

[typhoonzero]

• 第三篇：训练数据的存储和传输优化
  • 使用recordio
  • 使用分布式存储
  • metadata和task队列

[dzhwinter]

案例篇：实际的迁移case，以及遇到的坑

[helinwang]

为什么引入了master。

[jacquesqiao]

cpp python go 如何协作~

[jacquesqiao]

构建系统，测试系统的考虑和设计

[luotao1]

如果文章那么多的话，考虑放在cloud.paddlepaddle.org如何？

[dzhwinter]

@luotao1 还是放在blog里合适，分太多网站找不到发布源

[typhoonzero]

@luotao1 @dzhwinter 的确有官方blog是比较好～

[helinwang]

Related: PaddlePaddle/PaddleCloud#262

[typhoonzero]

Closing this issue, we should move the discussions under "blog" repo.