- 博客(4)
- 资源 (1)
- 收藏
- 关注
原创 Eclipse下开发Spark程序碰到的一个错误
Eclipse下开发Spark程序环境 Spark-1.4.1 scala ide for eclise的版本号为:4.4.0操作 在scala ide中创建scala工程,导入$SparkHome中lib下的spark-assembly-1.4.1-hadoop2.4.0.jar包。按理说,现在就可以在工程中进行Spark程序的开发了。但是scala ide提示一个错误。错误More
2016-04-09 19:09:54
1615
原创 hadoop0.21伪分布式模式的安装及WordCount的运行
因为实验需要,对hadoop-0.21源代码进行了修改。准备将编译好的jar包放入一个hadoop环境中进行实际运行测试。所以,就先安装hadoop0.21伪分布式模式。(PS:hadoop1.x的伪分布式的安装都相同)实验环境 软件 版本 操作系统 ubuntu-14.04.4-desktop-i386 hadoop发布版 hadoop-0.21 jdk jdk1.7
2016-03-22 11:18:41
680
原创 Hadoop-0.21源代码编译及导入eclipse
本人因为实验需要用到Hadoop-0.21版本中Hadoop的LATE推测执行算法,所以就对Hadoop-0.21的源代码进行了编译。下面介绍编译的过程:实验环境 软件 版本 操作系统 ubuntu-14.04.4-desktop-i386 hadoop源代码 hadoop-common-branch-0.21.zip hadoop发布版 hadoop-0.21 j
2016-03-19 22:21:10
1697
原创 ST3插件——PlainTasks的使用
安装很简单:ctrl + shift + p,输入install回车,再输入plaintasks回车即可。以下是一些支持的操作,更多的操作请看github。地址:github.com/aziz/PlainTasks新建一个文件用于写任务 ctrl + shift + p ,然后输入task,最后选择 Tasks:New document新建任务 ctrl + enter 或者 ctrl +
2015-11-25 19:23:20
4394
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人