haijiege的专栏

在IDEA中运行WordCount成功打包后使用命令：./spark-submit --class WordCount /home/hadoop/WordCount/out/artifacts/WordCount_jar/WordCount.jar运行后报错：查了好久发现可能跟package name有关，于是尝试下面的提交方式：./spark-submit --class scala.dblab...

1.  在Windows平台下搭建Spark开发环境（Intellij IDEA+Maven）1.1 集成开发环境IDE为了方便应用程序开发与测试，提高开发效率，一般使用集成开发工具IDE。同样，为了方便Spark应用程序编写和测试，可以选择集成开发工具Intellij IDEA或Eclipse。由于Intellij IDEA对Scala更好的支持，大多Spark开发团队选择了Intellij I...

首先注明：本文不是原创，我也是在网上找了好久，找到这篇博文（链接），解决了我的问题，顺便在这里总结一下，给有需要的人。项目是用Maven 创建的，具体的创建过程就不做解释了。出现的问题如下： 具体问题的图，如下：打开设置界面的路径如下: 主界面File——>Project Structure——>modules 如上图红圈所示，我们可以根据对项目的任意目录进行这五种目录类型标注，这个知...

本人刚开始接触Scala语言，想搭建一个IDE开发环境，所有的操作都是按照网上的做的，但是就是没找到运行的地方在哪里，如图：朋友告诉我，我的文件建错了，应该建一个object而不是建一个class写入相应的代码后，右键，你会神奇的发现，有run了，本人刚学Scala，不要喷，也希望帮助到像我一样刚入门的人。输出为：[plain] view plain copy....../Users/eric/D...

1. Intellij IDEA常用快捷键下面的快捷键，最好自己试一下，这样的话就能明白它到底是干什么用的，语言描述可能不到位快捷鍵 用法描述 Ctrl+Shift+A 根据名称查找操作，例如查找创建scala class操作 Alt+F1 视图切换 Ctrl+Tab 工具窗口、正在编辑的代码文件切换 Alt+Home 显示导航条 Ctrl+J 插入代码模板，例如main方法 Ct...