
大数据
即心即佛
这个作者很懒,什么都没留下…
展开
-
Hive增加Update、Delete支持
配制hive-site.xml<property> <name>hive.support.concurrency</name> <value>true</value></property><property> <name>hive.exec.dynamic.partition.mode</name> <value>nonstrict</v..原创 2021-02-04 12:02:45 · 213 阅读 · 0 评论 -
利用sqoop把MySQL数据导入Hive
环境准备1. 安装Hadoop2. 安装Hive安装Sqoopcd /opt/installwget https://mirror.bit.edu.cn/apache/sqoop/1.4.7/sqoop-1.4.7.bin__hadoop-2.6.0.tar.gztar -zxvf sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz -C /opt/bigdatacd /opt/bigdata/sqoop-1.4.7.bin__hadoop-2.6.0/..原创 2021-02-02 14:28:52 · 282 阅读 · 0 评论 -
Fink集群安装
环境准备192.168.8.140 bigdata-node1192.168.8.141 bigdata-node2192.168.8.142 bigdata-node3192.168.8.143 bigdata-node4192.168.8.144 bigdata-node5安装jdk8(略)安装zookeeper集群(略)安装hadoop2.7集群(略)编辑hosts主机名映射(所有节点都需要执行)vim /etc/hosts在文件末尾增加ssh-c..原创 2021-01-21 17:49:25 · 279 阅读 · 0 评论 -
Centos安装Hadoop + Hive集群
环境准备192.168.8.140 bigdata-node1192.168.8.141 bigdata-node2192.168.8.142 bigdata-node3192.168.8.143 bigdata-node4192.168.8.144 bigdata-node5关闭防火墙(所有节点都需要执行)systemctl stop firewalld关闭selinux(所有节点都需要执行)vim /etc/selinux/configSELINUX=di..原创 2021-01-19 16:59:19 · 635 阅读 · 0 评论 -
Centos安装Cloudera Manager 6.3.0
环境准备192.168.8.140 bigdata-node1192.168.8.141 bigdata-node2192.168.8.142 bigdata-node3192.168.8.143 bigdata-node4192.168.8.144 bigdata-node5关闭防火墙(所有节点都需要执行)systemctl stop firewalld关闭selinux(所有节点都需要执行)vim /etc/selinux/configSELINUX=di..原创 2021-01-13 13:13:22 · 476 阅读 · 0 评论