
spark
徐涛_java_web前端
啊啊
展开
-
spark远程调试代码报错 StandaloneAppClient$ClientEndpoint: Failed to connect to master 192.168.126.128:7077
一、分析原因:查看服务器的远程端口绑定ip这边显示绑定的是127.0.0.1:7077表示只能本地访问正确的访问方式为:局域网Ip:7077二、查看启动脚本设置:分析脚本可以看到这边启动master和slaves分别是两个脚本,由于我们是通过start-master.sh去运行的,我们查看start-master.sh通过start-master可以发现原创 2017-06-19 22:41:38 · 15580 阅读 · 7 评论 -
Spark伪分布式搭建
Spark分布式搭建利用spark(2.1.1)和hadoop(2.8.0)最新版一、下载sparkSpark地址:版本https://d3kbcqa49mib13.cloudfront.net/spark-2.1.1-bin-hadoop2.7.tgz二、下载scala此处scala版本要注意scala版本,spark有版本限制这边可以看到用了scala2.11的原创 2017-07-05 21:37:48 · 861 阅读 · 0 评论 -
intellij idea安装scala插件后却没有new》Scala class选项
在file=》project structure点击+号:选择本机scala的安装路径原创 2017-07-05 23:43:54 · 11972 阅读 · 3 评论