
yarn
fansy1990
这个作者很懒,什么都没留下…
展开
-
Yarn运行simpleyarnapp
版本:hadoop2.2.0源码在https://github.com/hortonworks/simple-yarn-app这里可以下载。之前一直试验这个simpleyarnapp一直没有成功过,作为yarn的hello world应该没有那么难运行吧。几经排查,发现还是classpath路径的问题。首先,还是要按照http://blog.youkuaiyun.com/fansy1990/article/d原创 2014-04-10 13:54:50 · 5373 阅读 · 0 评论 -
/bin/bash: line 0: fg: no job control一般解决方法
测试版本:CDH5.0,(Hadoop2.3)在使用windows调用Hadoop yarn平台的时候,一般都会遇到如下的错误:2014-05-28 17:32:19,761 WARN org.apache.hadoop.yarn.server.nodemanager.DefaultContainerExecutor: Exception from container-launch with co原创 2014-05-29 15:12:04 · 19565 阅读 · 2 评论 -
Hadoop yarn log简单分析
测试环境:CDH5.0(Hadoop2.3)原创 2014-05-29 16:04:22 · 8910 阅读 · 0 评论 -
Java Web提交任务到Spark
1. windows简单java程序调用Spark,执行Scala开发的Spark程序,这里包含两种模式: 1> 提交任务到Spark集群,使用standAlone模式执行; 2> 提交任务到Yarn集群,使用yarn-client的模式;2. windows 开发java web程序调用Spark,执行Scala开发的Spark程序,同样包含两种模式,参考1.3. linux运行java web程序调用Spark,执行Scala开发的Spark程序,包含两种模式,参考1.原创 2015-08-26 12:51:17 · 22085 阅读 · 16 评论