IDEA
关注
分享
扫一扫
小小小黄鸡
这个作者很懒，什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
使用IDEA 搭建 spark on yarn 的开发环境+调试~
1.导入yarn和hdfs配置文件因为spark on yarn 是依赖于yarn和hdfs的，所以获取yarn和hdfs配置文件是首要条件，将core-site.xml、hdfs-site.xml 、yarn-site.xml 这三个文本考入到你IDEA项目里面的resource目录下，如下图所示：...原创 2018-05-25 16:12:35 · 10087 阅读 · 22 评论 -
java.lang.NoClassDefFoundError: Could not initialize class scala.tools.fusesource_embedded.jansi.int
我自己在windows下编译了一遍spark，成功了，全部都success了，美滋滋，然后我想在windows下启动下spark-shell： 结果，嗯？出错了？To adjust logging level use sc.setLogLevel(newLevel). For SparkR, use setLogLevel(newLevel).[ERROR] Terminal init...原创 2018-05-29 15:12:17 · 4193 阅读 · 0 评论