spark
关注
分享
扫一扫
tbabg
小白进阶
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
IDEA+spark+scala wordcount 测试任务提交运行
IDEA下载安装：新建scala项目：file--->new--->project scala-->sbt 自动下载导入需要的jar包file--->project Structure libraries:引入spark下的jar包右击scala，新建scala class ,选择 objectwordcount scala代码：import org.apache.s...原创 2018-05-12 22:44:09 · 1735 阅读 · 0 评论 -
IDEA 运行spark减少输出INFO日志
只需要在程序中加一句：val sc = new SparkContext(conf)sc.setLogLevel("ERROR")即可原创 2018-06-08 15:51:06 · 2480 阅读 · 1 评论