
tensorflowonspark
fansy1990
这个作者很懒,什么都没留下…
展开
-
Centos6安装TensorFlow及TensorFlowOnSpark
1. 需求描述在Centos6系统上安装Hadoop、Spark集群,并使用TensorFlowOnSpark的 YARN运行模式下执行TensorFlow的代码。(最好可以在不联网的集群中进行配置并运行)2. 系统环境(拓扑)操作系统:Centos6.5 Final ; Hadoop:2.7.4 ; Spark:1.5.1-Hadoop2.6; TensorFlow 1.3.0;TensorFl原创 2017-10-27 23:51:28 · 1966 阅读 · 0 评论 -
TensorFlowOnSpark stuck
问题描述:在使用TensorFlowOnSpark做测试的时候,发现任务,老是卡着并没有实际的运行。解决方法:1. 由于我使用的是自编译的TensorFlow,当时编译的时候有一个enable HDFS,默认是false,所以再次编译了一遍,把对应的HDFS enable设置为了true;2. 没有严格参考官网: 官网上面在使用spark-submit提交的时候,添加了--conf参数,而我以原创 2017-10-31 13:39:38 · 1054 阅读 · 0 评论