
hadoop
jp_666
这个作者很懒,什么都没留下…
展开
-
Ubuntu常用命令(hadoop学习笔记)
Linux windowsls:列出当前文件夹下的文件 dirls /usr:显示usr文件夹下的内容ls –al:显示所有文件(包括隐藏的文件)pwd:显示当前目录cd ..:返回上一级cd /usr:跳转到usr目录下clear:清屏whoami:显示当前登录的用户名sudo passwd:修改ro原创 2017-12-20 16:05:33 · 359 阅读 · 0 评论 -
Hadoop 配置
Hadoop用户处理海量数据,需要考虑两个问题,一个是存储(存储使用分布式文件系统:HDFS),另一个是计算(计算需要使用MapReduce)分为三种模式:(1) 独立模式(2) 伪分布式模式(3) 完全分布式模式在ubuntu的控制台上使用jps命令可以查看当前有哪些进程使用hadoop fs -ls / (表示显示根目录下的与hadoop相关的文件) n原创 2017-12-24 20:11:04 · 272 阅读 · 0 评论 -
ubuntu安装hadoop
在ubuntu中安装hadoop的方式如下:(1) 下载hadoop-2.7.1.tar.gz压缩包(2) 解压:tar –xzvf hadoop-2.7.1.tar.gz(3) 把解压之后的文件移动到usr下:mv Hadoop-2.7.1 /usr/soft/(4) cd /usr/soft(5) cd hadoop-2.7.1(6) cd etc原创 2017-12-21 20:48:53 · 302 阅读 · 0 评论 -
在ubuntu下安装jdk
(1) 下载jdk(注意版本和选择64位还是32位)(2) 进入下载的文件夹(3) 解压jdk:tar -xzvf jdk.tar.gz(4) 在usr目录下创建一个自己安装软件的目录:cd /usr(5) sudo mkdir soft(6) ls(查看是否创建成功)(7) ls –al(查看全部文件和文件权限)(8) 发现创建的soft文件夹只有root用户具有原创 2017-12-21 18:53:25 · 306 阅读 · 0 评论 -
虚拟机的网络连接方式
在虚拟机中有三种网络连接方式,简单列举如下:1. 桥接:客户机就相当于真实主机,可以访问互联网,设置ip,互相访问。如果没有网络,主机之间无法连通2. NAT:网络地址转换。客户机和宿主机形成网络,客户机可以访问互联网,由宿主机做dns和nat。ip也是由宿主机分配,客户机无法访问网络中的其他主机。没有网络的环境下,宿主机和客户机形成的网络仍然是连通的,但是客户机的ip不能修改原创 2017-12-21 18:26:53 · 261 阅读 · 0 评论 -
虚拟机克隆
在虚拟机中克隆虚拟机的方法如下:(1) 关闭虚拟机中的计算机;(2) 右击要克隆的计算机—>选择管理—>克隆-->下一步-->虚拟机中的当前状态克隆,下一步-->在克隆方法中选择创建完整克隆-->填写虚拟机名称和位置-->点击完成原创 2017-12-21 18:24:50 · 225 阅读 · 0 评论 -
安装虚拟机增强工具vmware tool
Host:宿主机Vmware:虚拟机Client:客户机增强工具的作用:(1) 和host共享文件(2) 鼠标自动捕捉和释放(3) 高分屏(4) 自适应窗口安装方法:(1) 点击vmware菜单栏中的虚拟机(2) 安装vmware-tools(3) 把下载的文件解压(4) 打开终端,进入解压后的文件(5) 在终端输入./vmware-instal原创 2017-12-20 18:46:42 · 2947 阅读 · 0 评论 -
Ubuntu安装桌面程序
如果安装的是ubuntu server版本(原本是没有桌面的),可以安装ubuntu桌面程序Ubuntu安装桌面程序的方式如下:sudo apt-cache search desktop(搜索桌面)sudoapt-get install ubuntu-desktop(安装桌面)原创 2017-12-20 18:44:17 · 660 阅读 · 0 评论 -
在ubuntu中配置新的软件源
cd /etc/apt先备份sources.list:sudo cp sources.list sources.list.bak因为sources.list是只能在root用户下进行修改,所以需要切换到root用户echo ‘’> sources.list(使用空格把原来的sources.list中的内容覆盖掉,也就相当于删除原来sources.list中的内容)cat s原创 2017-12-20 18:37:53 · 369 阅读 · 0 评论 -
Ubuntu的目录和权限(hadoop学习笔记)
/ :表示根目录/bin:binary(存放可执行文件)/sbin:binary(存放可执行文件)/boot:引导/etc:配置目录/mnt:挂载目录(命令是mount)/home:主目录/dev:device 设备/usr:unix systemresource 文件类型d:目录-:文件b:block(块文件)l:link(符号链接,相当于原创 2017-12-20 16:10:05 · 577 阅读 · 0 评论 -
对ubuntu修改用户名等信息
进入etc目录:cd /etcsudo gedit passwd修改文件中的:ubuntu16_worker1:x:1000:1000:jp,,,:/home/ubuntu16_worker1:/bin/bash下面修改主机名称:在etc目录下:sudo gedit hostname原创 2017-12-28 18:49:56 · 449 阅读 · 0 评论