
大数据
Java程序之猿
这个作者很懒,什么都没留下…
展开
-
大数据之Hive初始化数据元
安装完hive后,需要配置好hive-site.xml配置如下:<?xml version="1.0" encoding="UTF-8"?><?xml-stylesheet type="text/xsl" href="configuration.xsl"?><configuration><property> <name>javax.jdo.option.ConnectionURL</name> <value&..原创 2020-12-25 10:14:56 · 1236 阅读 · 0 评论 -
大数据学习笔记之ZooKeeper
特点:zookeeper:一个领导者(leader),多个跟随者(follow)组成的集群leader:负责进行投票的发起和决议,更新系统状态follower:用于接收客户请求并向客户端返回结果,在选举leader过程中参与投票集群中奇数台服务器只要有半数以上节点存活,zookeeper集群就能正常服务全局一致性搭建Zookeeper环境1、先将下载好的zookeeper压缩包上传到服务器目录下,并解压 tar -zxvf zookeeper-3.4.10.tar.gz -C..原创 2020-08-28 13:39:36 · 208 阅读 · 0 评论 -
大数据学习笔记之Hadoop环境配置(完全分布式搭建)
先搭一台伪分布式的服务,然后直接克隆2台,一共3台克隆完成后需要更改主机名 hostnamectl set-hostname 名称在/etc/sysconfig/network-scripts/ifcfg-ens33修改ip映射关系把这个地址改成你设置的地址在/etc/hosts文件中添加服务器地址用上面的操作我们可以搭好3台独立大队伪分布式服务接下来把3台连到一起在hadoop-2.7.3/etc/hadoop目录下,在slaves文件中添加服务器名称(3台服...原创 2020-07-16 17:57:14 · 254 阅读 · 0 评论 -
大数据学习笔记之SSH免密登录
执行ssh-keygen -t rsa命令连续敲回车,不需要输入任何东西将ssh拷贝到自己的用户下执行ssh-copy-id 用户名执行完成后可以用ssh 用户名 进行验证如果跳转目录就说明成功原创 2020-07-15 23:38:17 · 282 阅读 · 0 评论 -
大数据学习笔记之Hadoop环境配置(伪分布式搭建)
Hadoop 运行环境搭建 1、禁用防火墙 2、在/etc/hosts 中设置ip映射关系 3、安装JDK伪分布式搭建 配置core-site.xml <!-- 指定 HDFS 中 NameNode 的地址 --> <property> <name>fs.d...原创 2020-07-15 23:14:15 · 254 阅读 · 0 评论