
linux
文章平均质量分 94
Se_cure
这个作者很懒,什么都没留下…
展开
-
centos7修改主机名字
两种方法:第一种: vi hosthome 将里面的localhost.localdomain 修改为你的名字 vi hosts 在里面添加 你的ip地址和主机名 比如:192.168.50.99 python2第二种: hostnamectl ...原创 2018-03-24 16:44:13 · 2233 阅读 · 0 评论 -
vm虚拟机 centos7配置java与hadoop环境
1.下载java的jdk文件,将其解压到linux里面 我这里是解压到用户hadoop里面的opt文件夹里面 解压的方式为 tar -zxvf jdk-8u152-linux-x64.tar.gztar -zxvf hadoop-2.7.5.tar.gz 2.你要把它配置到哪里 这里分为全局的和局部的 /etc/profile : 在登录时,操作系统定制用户环境时使用...原创 2018-03-24 15:04:23 · 1790 阅读 · 0 评论 -
linux里面的常用命令
下面是一些常用的命令以及解释1. 查看网卡:ifconfig 2. 查看当前路径:pwd 3. 查看当前目录里面的所有文件:ls 4. 以列表的方式查看:ll -alh a) ll 列表的方式显示文件的信息 形同于 ls -l b) 后面加-a 显示全部文件包括隐藏的文件 c) 如果后面再加-h 那么就是用来显示大小 并给文件大小一个合适的单位 d) 这些...原创 2018-03-24 20:39:28 · 631 阅读 · 0 评论 -
hadoop启动集群的免密码登陆设置
当我们要启动集群的时候,需要一指输入密码,这样下来是不是很费劲呢,不过跟着我设置了以后就不用发愁了步骤:1.进入到当前使用hadoop的用户主体目录里面,通过ll -a 先查看一下2.输入 ssh localhost 3.此时再ll -a一下会发现里面多了一个隐藏文件.ssh4.进入这个文件夹 cd .ssh5.输入 ssh-keygen -t rsa --> 遇到提示一直按...原创 2018-03-25 22:25:37 · 5411 阅读 · 2 评论 -
hadoop里面的dataname没用启动的解决方法
首先查看存namenode元数据和datanode元数据的路径 current的VERSIONfind / -name current --> 通过查找可以找到,此时存储的路径 cd进入这俩个文件夹中分别找到VERSION文件,查看俩个的clusterID是否一样 如果不一样将俩个修改成一样的之后重启集群就好了 原因是:执行多次namenod...原创 2018-03-25 22:09:03 · 2185 阅读 · 0 评论 -
pyspark的安装与配置
我们从pyspark就可以看出来 是python与spark俩者的结合,所以我们就需要在vm里面安装python,和spark第一步: 准备python此时的python 即 Anaconda 为一个.sh文件可以直接运行:bash Anaconda3-5.1.0-Linux-x86_64.sh当你运行后会发现有一个提示: 它是指当前没有安装bzip2,所以我们需要安装bzip2,不要...原创 2018-04-22 17:11:40 · 7565 阅读 · 1 评论