- 博客(6)
- 收藏
- 关注
原创 在Ubuntu上安装Hadoop单机/伪分布式
安装java、hadoop的版本不要太新,第一次安装jdk1.8.0和hadoop-2.9.2,在配置环境部分出了问题,后来安装的openjdk1.8以及hadoop-2.6,并按照下面教程完成安装。(http://dblab.xmu.edu.cn/blog/install-hadoop/)学习到了一些linux语句:1.修改:gedit +文件2.复制:cp 源文件 目标文件3.新建:...
2019-03-01 20:47:00
551
原创 [Hadoop]关于Mapreduce中map进程数量的控制
block_size=128; #hadoop2.xsplit_size;goal_num=mapred.map.task(用户设定)goal_size=total_size/goal_num;default_num = total_size/block_size(初始);input_file_num;1)若想增加map数量,则直接设置mapred.map.tasks为较大值即可(&g...
2019-03-01 15:38:41
494
原创 Linux中安装jdk
https://blog.youkuaiyun.com/pdsu161530247/article/details/815829801.其中用到的命令:(移动文件到另一文件夹)cd 打开文件所在目录sudo mv 文件名称 指定目录(删除文件)rm -f 文件名称2.注意vim编辑profile文件时使用sudo,不然没有编辑权限...
2019-02-22 16:49:33
124
原创 Python数据类型转换(str、float、int)
链接:[https://blog.youkuaiyun.com/HuaCode/article/details/79297329 ]
2019-02-20 15:08:12
29144
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人