- 博客(6)
- 收藏
- 关注
原创 在Ubuntu上安装Hadoop单机/伪分布式
安装java、hadoop的版本不要太新,第一次安装jdk1.8.0和hadoop-2.9.2,在配置环境部分出了问题,后来安装的openjdk1.8以及hadoop-2.6,并按照下面教程完成安装。 (http://dblab.xmu.edu.cn/blog/install-hadoop/) 学习到了一些linux语句: 1.修改:gedit +文件 2.复制:cp 源文件 目标文件 3.新建:...
2019-03-01 20:47:00
580
原创 [Hadoop]关于Mapreduce中map进程数量的控制
block_size=128; #hadoop2.x split_size; goal_num=mapred.map.task(用户设定) goal_size=total_size/goal_num; default_num = total_size/block_size(初始); input_file_num; 1)若想增加map数量,则直接设置mapred.map.tasks为较大值即可(&g...
2019-03-01 15:38:41
521
原创 Linux中安装jdk
https://blog.youkuaiyun.com/pdsu161530247/article/details/81582980 1.其中用到的命令: (移动文件到另一文件夹) cd 打开文件所在目录 sudo mv 文件名称 指定目录 (删除文件) rm -f 文件名称 2.注意vim编辑profile文件时使用sudo,不然没有编辑权限 ...
2019-02-22 16:49:33
140
原创 Python数据类型转换(str、float、int)
链接:[https://blog.youkuaiyun.com/HuaCode/article/details/79297329 ]
2019-02-20 15:08:12
29214
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅