CDH6.2.0安装

最新推荐文章于 2024-09-27 17:42:07 发布
原创 最新推荐文章于 2024-09-27 17:42:07 发布 · 973 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#CDH6

[集群分配]
ipaddr            hostname    ram    vhd    role
192.168.31.135    cluster1    8G    50G    cdh-master    ntp-server ansible mysql
192.168.31.136    cluster2    4G    50G    cdh-monitor mysql
192.168.31.137    cluster3    4G    50G    cdh-slave1    es-node
192.168.31.138    cluster4    4G    50G cdh-slave2    es-node
192.168.31.139    cluster5    4G    50G cdh-slave3    es-node
[参考]
    https://www.cnblogs.com/swordfall/p/10816797.html#auto_id_11
    
[环境准备]
    免密登录
    NTP时间同步
    [可选]Ansible批量工具
    修改Linux swappiness参数(所有节点)
        为了避免服务器使用swap功能而影响服务器性能，一般都会把vm.swappiness修改为0（cloudera建议10以下）
        #ansible cdh-cluster -m shell -a "echo 0 > /proc/sys/vm/swappiness"
        修改配置文件
        #ansible cdh-cluster -m shell -a "echo 'vm.swappiness=0' >> /etc/sysctl.conf"
        *上述方法rhel6有效，rhel7.2中:tuned服务会动态调整系统参数
        #cd /usr/lib/tuned/
        #grep "vm.swappiness" * -R
            latency-performance/tuned.conf:vm.swappiness=10
            throughput-performance/tuned.conf:vm.swappiness=10
            virtual-guest/tuned.conf:vm.swappiness = 30
        vi修改列出的所有文件对应参数
        将配置文件发送至其他节点
        #for i in {2..5};do scp latency-performance/tuned.conf cluster$i:$PWD/latency-performance/;done
        #for i in {2..5};do scp throughput-performance/tuned.conf cluster$i:$PWD/throughput-performance/;done
        #for i in {2..5};do scp virtual-guest/tuned.conf cluster$i:$PWD/virtual-guest/;done
        检查是否已全部修改
        #ansible cdh-cluster -m shell -a "grep 'vm.swappiness' /usr/lib/tuned/* -R"
        
    禁用透明页(所有节点)
        临时生效
        #echo never > /sys/kernel/mm/transparent_hugepage/defrag
        #echo never > /sys/kernel/mm/transparent_hugepage/enabled
        永久生效 在/etc/rc.local 添加上面命令
        #cat << EOF >> /etc/rc.local
        >echo never > /sys/kernel/mm/transparent_hugepage/defrag
        >echo never > /sys/kernel/mm/transparent_hugepage/enabled
        >EOF
        配置文件发送至各节点
        #for i in {2..5};do scp /etc/rc.local cluster$i:/etc/;done
        添加可执行权限
        #ansible cdh-cluster -m shell -a "chmod +x /etc/rc.d/rc.local"
        
    MySQL安装包
        官网下载mysql-8.0.17-1.el7.x86_64.rpm-bundle.tar
        官网下载mysql-connector-java-8.0.17.tar.gz
        在可连外网的机器上准备mysqlPacks.tar.gz
            #mkdir /opt/repo/MySQL8.0.17/RPMS/packs
            #yum install -y net-tools perl openssl openssl-devel --downloadonly --downloaddir=/opt/repo/MySQL8.0.17/RPMS/packs
        打包packs
            #tar -cvf mysqlPacks.tar.gz /opt/repo/MySQL8.0.17/RPMS/packs
    
    Httpd安装包
        创建本地存储目录
        #mkdir /opt/repo/httpd
        在可连外网的机器上下载httpd安装包
        #yum install -y httpd --downloadonly --downloaddir=/opt/repo/httpd
        打包
        #tar -cvf httpd.tar.gz /opt/repo/httpd
        
    Createrepo安装包(CDH依赖)
        官网allkeys.asc下载
            https://archive.cloudera.com/cm6/6.2.0/
                allkeys.asc
        官网rpm包下载
            https://archive.cloudera.com/cm6/6.2.0/redhat7/yum/
                RPM-GPG-KEY-cloudera
                cloudera-manager.repo
            https://archive.cloudera.com/cm6/6.2.0/redhat7/yum/RPMS/x86_64/
                cloudera-manager-agent-6.2.0-968826.el7.x86_64.rpm
                cloudera-manager-daemons-6.2.0-968826.el7.x86_64.rpm
                cloudera-manager-server-6.2.0-968826.el7.x86_64.rpm
                cloudera-manager-server-db-2-6.2.0-968826.el7.x86_64.rpm
                enterprise-debuginfo-6.2.0-968826.el7.x86_64.rpm
                oracle-j2sdk1.8-1.8.0+update181-1.x86_64.rpm
        官网parcels下载
            https://archive.cloudera.com/cdh6/6.2.0/parcels/
                CDH-6.2.0-1.cdh6.2.0.p0.967373-el7.parcel
                CDH-6.2.0-1.cdh6.2.0.p0.967373-el7.parcel.sha1
                CDH-6.2.0-1.cdh6.2.0.p0.967373-el7.parcel.sha256
        创建本地存储目录
        #mkdir /opt/repo/createrepo
        在可连外网的机器上下载createrepo安装包
        #yum install -y yum-utils createrepo --downloadonly --downloaddir=/opt/repo/createrepo
        打包
        #tar -cvf createrepo.tar.gz /opt/repo/createrepo
        添加cdh官方yum源cloudera-manager.repo
        #cp cloudera-manager.repo /etc/yum.repos.d/
        导入GPGkey
        $rpm --import /opt/repo/cdh6.2.0/RPM-GPG-KEY-cloudera
        创建本地存储目录
        #mkdir /opt/repo/cdh6.2.0/RPMS/packs
        在可连外网的机器上下载cdh依赖安装包
        #yum install -y cloudera-manager-daemons cloudera-manager-agent cloudera-manager-server --downloadonly --downloaddir=/opt/repo/cdh6.2.0/RPMS/packs
        packs文件夹和cdh一起打包即可
[安装部署]
    [JDK]
        所有节点安装JDK
        #ansible cdh-cluster -a "rpm -ivh /opt/repo/cdh6.2.0/RPMS/oracle-j2sdk1.8-1.8.0+update181-1.x86_64.rpm"
        修改主节点环境配置文件,添加环境变量
        #cat << EOF >> /etc/profile
        >
        > #JAVA
        > export JAVA_HOME=/usr/java/jdk1.8.0_181-cloudera
        > export CLASSPATH=.:\$CLASSPATH:\$JAVA_HOME/lib
        > export PATH=\$PATH:\$JAVA_HOME/bin
        > EOF
        将配置文件发送至其他节点
        #for i in {2..5};do scp /etc/profile cluster$i:/etc/;done
        所有节点重新加载环境变量(由于ansible执行的是non-login shell,因此ansible操作只刷新/etc/bashrc和~/.bashrc, 若将环境变量写在/etc/profile时则不能用ansible加载,只能执行重启让系统自动加载)
        #ansible cdh-cluster -a "reboot"
        添加java命令软链接至/usr/bin/
        ansible cdh-cluster -m shell -a "ln -s /usr/java/jdk1.8.0_181-cloudera/bin/java /usr/bin/java"
        检查安装是否成功
        #ansible cdh-cluster -m shell -a "java -version"
    
    [MySQL8]主节点+监控节点(视集群资源而定)
        卸载系统自带的mariadb
        #rpm -qa | grep mariadb
        #rpm -e --nodeps mariadb-libs-5.5.60-1.el7_5.x86_64
        解压安装包
        #cd /opt/repo/MySQL8.0.17
        #mkdir RPMS
        #tar -xvf mysql-8.0.17-1.el7.x86_64.rpm-bundle.tar -C RPMS
        #tar -xvf mysqlPacks.tar.gz -C RPMS
        文件安装顺序：common --> libs --> client --> server --> devel。
        其中server需要perl和net-tools依赖,devel需要openssl-devel依赖
        rpm -ivh mysql-community-common-8.0.17-1.el7.x86_64.rpm
        rpm -ivh mysql-community-libs-8.0.17-1.el7.x86_64.rpm
        rpm -ivh mysql-community-libs-compat-8.0.17-1.el7.x86_64.rpm
        rpm -ivh mysql-community-client-8.0.17-1.el7.x86_64.rpm
        rpm -ivh packs/perl*.rpm
        rpm -ivh packs/net-tools*.rpm
        rpm -ivh mysql-community-server-8.0.17-1.el7.x86_64.rpm
        rpm -ivh packs/keyutils-libs-devel-1.5.8-3.el7.x86_64.rpm
        rpm -ivh packs/libcom_err-devel-1.42.9-13.el7.x86_64.rpm
        rpm -Uvh packs/libkadm5-1.15.1-37.el7_6.x86_64.rpm
        rpm -ivh packs/libsepol-devel-2.5-10.el7.x86_64.rpm
        rpm -ivh packs/pcre-devel-8.32-17.el7.x86_64.rpm
        rpm -Uvh packs/libselinux-devel-2.5-14.1.el7.x86_64.rpm
        rpm -ivh packs/libverto-devel-0.2.5-4.el7.x86_64.rpm
        rpm -Uvh packs/krb5-libs-1.15.1-37.el7_6.x86_64.rpm
        rpm -ivh packs/krb5-devel-1.15.1-37.el7_6.x86_64.rpm
        rpm -ivh packs/zlib-devel-1.2.7-18.el7.x86_64.rpm
        rpm -Uvh packs/openssl-libs-1.0.2k-16.el7_6.1.x86_64.rpm packs/openssl-1.0.2k-16.el7_6.1.x86_64.rpm
        rpm -ivh packs/openssl-devel-1.0.2k-16.el7_6.1.x86_64.rpm
        rpm -ivh mysql-community-devel-8.0.17-1.el7.x86_64.rpm
        MySQL初始化安装 初始化mysql,使MySQL目录的拥有者为mysql用户
        #mysqld --initialize --user=mysql
        开启mysql服务
        #systemctl enable mysqld
        #systemctl start mysqld
        查看自动生成的初始密码
        #grep "temporary password" /var/log/mysqld.log
        使用初始密码登录mysql并修改mysql密码
        #mysql -uroot -p
        >ALTER USER 'root'@'localhost' IDENTIFIED WITH mysql_native_password BY '新密码';
        开启远程连接权限
        >CREATE USER 'root'@'%' IDENTIFIED BY 'root';
        >ALTER USER 'root'@'%' IDENTIFIED WITH mysql_native_password BY 'root';
        >FLUSH PRIVILEGES;
        >quit
        
        基于以上命令写了两个脚本
        mysqlInstall.sh 脚本执行路径为/opt/repo/MySQL8.0.17/RPMS文件夹下,即可自动完成安装
            #/bin/sh
            rpm -ivh mysql-community-common-8.0.17-1.el7.x86_64.rpm
            rpm -ivh mysql-community-libs-8.0.17-1.el7.x86_64.rpm
            rpm -ivh mysql-community-libs-compat-8.0.17-1.el7.x86_64.rpm
            rpm -ivh mysql-community-client-8.0.17-1.el7.x86_64.rpm
            rpm -ivh packs/perl*.rpm
            rpm -ivh packs/net-tools*.rpm
            rpm -ivh mysql-community-server-8.0.17-1.el7.x86_64.rpm

            rpm -ivh packs/keyutils-libs-devel-1.5.8-3.el7.x86_64.rpm
            rpm -ivh packs/libcom_err-devel-1.42.9-13.el7.x86_64.rpm
            rpm -ivh packs/libkadm5-1.15.1-37.el7_6.x86_64.rpm
            rpm -ivh packs/libsepol-devel-2.5-10.el7.x86_64.rpm
            rpm -ivh packs/pcre-devel-8.32-17.el7.x86_64.rpm
            rpm -Uvh packs/libselinux-devel-2.5-14.1.el7.x86_64.rpm
            rpm -ivh packs/libverto-devel-0.2.5-4.el7.x86_64.rpm
            rpm -ivh packs/krb5-libs-1.15.1-37.el7_6.x86_64.rpm
            rpm -ivh packs/krb5-devel-1.15.1-37.el7_6.x86_64.rpm
            rpm -ivh packs/zlib-devel-1.2.7-18.el7.x86_64.rpm
            rpm -Uvh packs/openssl-libs-1.0.2k-16.el7_6.1.x86_64.rpm packs/openssl-1.0.2k-16.el7_6.1.x86_64.rpm
            rpm -ivh packs/openssl-devel-1.0.2k-16.el7_6.1.x86_64.rpm
            rpm -ivh mysql-community-devel-8.0.17-1.el7.x86_64.rpm

            mysqld --initialize --user=mysql
        mysqlInit.sh 脚本路径不影响,可以自定义修改新密码
            #!/bin/sh
            NEW_PASSWORD=root
            
            systemctl enable mysqld
            systemctl start mysqld

            line=`grep "temporary password" /var/log/mysqld.log`
            INIT_PASSWORD=${line##*root@localhost\: }
            echo "MySQL temporary password is: $INIT_PASSWORD"
            cat > ~/.my.cnf << EOF
            [mysql]
            user=root
            password="$INIT_PASSWORD"
            EOF

            mysql --connect-expired-password -e "
              ALTER USER 'root'@'localhost' IDENTIFIED WITH mysql_native_password BY '$NEW_PASSWORD';
              CREATE USER 'root'@'%' IDENTIFIED WITH mysql_native_password BY '$NEW_PASSWORD';
              FLUSH PRIVILEGES;
              quit
            "
            cat > ~/.my.cnf << EOF
            [mysql]
            user=root
            password="$NEW_PASSWORD"
            EOF
            
            
            echo "MySQL new password is: root"
            echo "Enable remote access success."
            
        CDH数据库初始化,为每个服务创建用户,设置权限(后续安装服务时使用)
            库            用户                密码
            cmserver    cmserveruser    root
            metastore    hiveuser        root
            amon        amonuser        root
            rman        rmanuser        root
            oozie        oozieuser        root
            hue            hueuser            root
            建库语句: CREATE DATABASE IF NOT EXISTS 库名 DEFAULT CHARACTER SET utf8 COLLATE utf8_unicode_ci;
            建用户语句: CREATE USER '用户名'@'%' IDENTIFIED WITH mysql_native_password BY '密码';
            设置权限语句: GRANT ALL ON 库名.* TO '用户名'@'%';
            基于以上编写脚本mysqlCDHInit.sh
            #/bin/sh
            DB_LIST=(cmserver metastore amon rman oozie hue)
            USER_LIST=(cmserveruser hiveuser amonuser rmanuser oozieuser hueuser)
            PASSWORD_LIST=(root root root root root root)
            for ((i=0; i<${#DB_LIST[@]}; i++))
            do
              mysql --connect-expired-password -e "
                CREATE DATABASE IF NOT EXISTS ${DB_LIST[i]} DEFAULT CHARACTER SET utf8 COLLATE utf8_unicode_ci;
                CREATE USER '${USER_LIST[i]}'@'%' IDENTIFIED WITH mysql_native_password BY '${PASSWORD_LIST[i]}';
                GRANT ALL ON ${DB_LIST[i]}.* TO '${USER_LIST[i]}'@'%';
                FLUSH PRIVILEGES;
              "
            done
    [MySQL8 JDBC-conector]所有节点放置mysql-connector-java-8.0.17.jar
        主上解压mysql-connector
        #cd /opt/repo/MySQL8.0.17/
        #tar -xvf mysql-connector-java-8.0.17.tar.gz
        提取mysql-connector-java-8.0.17.jar
        #mv mysql-connector-java-8.0.17/mysql-connector-java-8.0.17.jar ./
        删除解压的其他文件(仅需要jar包)
        #rm -rf mysql-connector-java-8.0.17
        所有节点建立目录
        #ansible cdh-cluster -a "mkdir /usr/share/java"
        传输jar包至所有节点对应目录,并重命名(不然cdh脚本无法识别)
        for i in {1..5};do scp mysql-connector-java-8.0.17.jar cluster$i:/usr/share/java/mysql-connector-java.jar;done
    [HTTP]所有点安装Httpd服务
        上传压缩包至路径并解压
        #tar -xvf httpd
        发送文件至个节点
        #for i in {2..5};do scp -r /opt/repo/httpd cluster$i:/opt/repo/;done
        所有安装httpd
        #ansible cdh-cluster -a "rpm -ivh /opt/repo/httpd/*"
        修改配置文件
        #vi /etc/httpd/conf/httpd.conf
            <Directory "/var/www/cgi-bin">
                AllowOverride None
                #Options None
                #Require all granted
                Options FollowSymLinks
                Order deny,allow
                allow from all
            </Directory>
        配置文件发送至各节点
        #for i in {2..5};do scp /etc/httpd/conf/httpd.conf cluster$i:/etc/httpd/conf/;done
        启动服务
        #ansible cdh-cluster -a "systemctl start httpd"
        #ansible cdh-cluster -a "systemctl enable httpd"
    [CDH RPM包安装]防止出现莫名错误，所有节点事先安装依赖包
        [主节点设置本地yum源]
        解压createrepo
        #tar -xvf createrepo.tar.gz
        安装createrepo
        #rpm -Uvh /opt/repo/createrepo/*.rpm
        创建本地源地址
        #mkdir -p /var/www/html/cloudera-repos/cdh6.2.6
        复制rpm包到本地源目录
        #cp /opt/repo/cdh6.2.0/RPMS/*.rpm /var/www/html/cloudera-repos/cdh6.2.0/
        #cd /var/www/html/cloudera-repos/cdh6.2.6/
        创建repodata
        #createrepo .
            成功显示如下
            Spawning worker 0 with 6 pkgs
            Workers Finished
            Saving Primary metadata
            Saving file lists metadata
            Saving other metadata
            Generating sqlite DBs
            Sqlite DBs complete
        导入GPGkey
        #ansible cdh-cluster -a "rpm --import /opt/repo/cdh6.2.0/RPM-GPG-KEY-cloudera"
        复制allkeys.asc
        $cp /opt/repo/cdh6.2.0/allkeys.asc /var/www/html/cloudera-repos/cdh6.2.0/
        复制manifest.json
        #cp /opt/repo/cdh6.2.0/RPMS/manifest.json /var/www/html/cloudera-repos/cdh6.2.0/
        此时检查文件是否齐全
        #ls /var/www/html/cloudera-repos/cdh6.2.0/
            allkeys.asc
            cloudera-manager-agent-6.2.0-968826.el7.x86_64.rpm
            cloudera-manager-daemons-6.2.0-968826.el7.x86_64.rpm
            cloudera-manager-server-6.2.0-968826.el7.x86_64.rpm
            cloudera-manager-server-db-2-6.2.0-968826.el7.x86_64.rpm
            enterprise-debuginfo-6.2.0-968826.el7.x86_64.rpm
            manifest.json
            oracle-j2sdk1.8-1.8.0+update181-1.x86_64.rpm
            repodata
        安装依赖包
        #ansible cdh-cluster -a "rpm -ivh /opt/repo/cdh6.2.0/RPMS/cloudera-manager-daemons-6.2.0-968826.el7.x86_64.rpm"
        #ansible cdh-cluster -a "rpm -Uvh /opt/repo/cdh6.2.0/RPMS/packs/*"
        将parcels移动至安装好的cloudera目录下
        #ansible cdh-cluster -m shell -a "mv /opt/repo/cdh6.2.0/parcels/* /opt/cloudera/parcel-repo/"
        验证parcel文件完整性
        #ansible cdh-cluster -m shell -a "cd /opt/cloudera/parcel-repo/ && sha1sum CDH-6.2.0-1.cdh6.2.0.p0.967373-el7.parcel | awk '{ print $1 }' > CDH-6.2.0-1.cdh6.2.0.p0.967373-el7.parcel.sha"
        修改parcel文件所属用户
        #ansible cdh-cluster -m shell -a "chown cloudera-scm:cloudera-scm /opt/cloudera/parcel-repo/*"
        主节点初始化安装脚本(password替换为之前设置的mysql中cmserveruser的密码,本文是root)
        #/opt/cloudera/cm/schema/scm_prepare_database.sh mysql cmserver cmserveruser password
            成功显示如下
            All done, your SCM database is configured correctly!
        打开cloudera-scm-server服务
        #systemctl start cloudera-scm-server
        *自选 开启开机自动启用cloudera-scm-server服务
        #systemctl enable cloudera-scm-server
        静候几分钟，浏览器打开 http://cluster1:7180 若本机没配置hosts文件的集群地址映射最好配上,不然后续cdh组件服务切换节点时无法访问
            Windows系统hosts文件路径:C:\Windows\System32\drivers\etc
            Linux系统hosts文件路径:/etc/hosts
            文件末尾添加集群主机名信息,如:
                192.168.31.135 cluster1
                192.168.31.136 cluster2
                192.168.31.137 cluster3
                192.168.31.138 cluster4
                192.168.31.139 cluster5
    [CM GUI建立集群]
        http://cluster1:7180登录页面初始超管用户为admin 密码admin
    

CDH常用安装包
不务正业的猿
08-26 2002
目录 CDH 6.0.1 redhat7/Centos7 x86_64 CDH 6.0.1 redhat6/Centos6 x86_64 CDH 6.1.1 redhat7/Centos7 x86_64 CDH 6.1.1 redhat6/Centos6 x86_64 CDH 6.2.0 redhat7/Centos7 x86_64 CDH 6.2.0 redhat6/Centos6 x86_64 CDH 6.3.0 redhat7/Centos7 x86_64 CDH 6.3.0 r.
CDH6.2.0最全安装包
04-07
CDH6.2.0最全安装包，包括管理服务以及客户端软件，还包括mysql5.7的安装包。
cdh6.2.0环境搭建
yuyedewutong的博客
04-02 512
CDH搭建 一、环境构建 1、下载软件 cdh下载：https://archive.cloudera.com/cdh6/6.2.0/parcels/ cm下载：https://archive.cloudera.com/cm6/6.2.0/redhat7/yum/RPMS/x86_64/ cm的key下载：https://archive.cloudera.com/cm6/6.2.0/ 备注：cent...
CDH6.2.0集群搭建详细教程（包含开启Kerberos与Sentry）
This is Yunis's blog!
08-22 3707
CDH6.2.0+Sentry+Kerberos安装过程记录文档 一、准备工作 1、本文环境 名称 CentOS JDK MySQL CM CDH 版本 7.9 1.8 5.7 6.2.0 6.2.0 2、集群规划 IP 主机名 角色 安装服务 内存 处理器 192.168.198.11 dtb-tc-app11 Master cloudera-scm-servercloudera-scm-agent 6G 4 192.168.198.12 dtb-tc-app12
CDH6.2.0离线安装（详细）
Bingmous的博客
12-29 6377
环境准备 静态IP /etc/hosts 关闭防火墙，禁用，所有节点 修改selinux，vim /etc/selinux/config —> SELINUX=disabled (修改)，所有节点 配置免密登录，ssh-keygen -t rsa，然后ssh-copy-id 自己主机，然后将.ssh拷贝到所有节点，这样就实现了互相通信 配置ntp服务，时间同步，所有节点 修改linux swappiness参数，所有节点 ## 查找包含的所在文件路径 grep "vm.swappine
CDH6.2.0安装详细步骤.docx
07-24
该资源用于CDH6.2.0的本地安装。 CDH是Apache Hadoop和相关项目的最完整、最受测试和最流行的发行版。CDH提供Hadoop的核心元素-可伸缩存储和分布式计算-以及基于web的用户界面和重要的企业功能。CDH是Apache许可的开放源码，是唯一提供统一批处理、交互式SQL和交互式搜索以及基于角色的访问控制的Hadoop解决方案。
大数据平台CDH6.2.0安装部署
10-27
大数据平台CDH6.2.0安装部署 大数据平台CDH6.2.0安装部署是指使用Cloudera Manager 6.2.0版本安装和部署大数据平台的过程。该过程包括安装Cloudera Manager Server、配置MySQL数据库、部署CDH Parcel文件、配置...
CDH6.2.0完整安装包网盘下载地址
03-15
cdh6.2.0安装部署教程.txt mysql-connector-java-5.1.47.tar.gz mysql-5.7.26-1.el7.x86_64.rpm-bundle.tar cloudera-manager-daemons-6.2.0-968826.el7.x86_64.rpm enterprise-debuginfo-6.2.0-968826.el7.x86_64....
phoenix-parcel-5.0.0-cdh6.2.0-el7安装包
08-03
5. **安装步骤**：首先，需要将phoenix-parcel-5.0.0-cdh6.2.0-el7包上传到Cloudera Manager的Parcel目录，然后通过Cloudera Manager界面进行分配、下载和激活。接着，重启相关服务以加载新的配置和库。 6. **使用...
centos 7.9下RPM包部署CDH6.2.0安装（多次安装，绝对无坑）
03-01
在本文中，我们将深入探讨如何在 CentOS 7.9 环境下，通过 RPM 包部署 CDH6.2.0，确保安装过程顺利，避免常见问题。CDH（Cloudera Distribution Including Apache Hadoop）是 Cloudera 提供的一个全面的大数据处理...
CDH6.2.0详细安装步骤
热门推荐
努力努力再努力！的博客
07-19 7万+
1.准备集群 本文档使用的是三台虚拟机，IP和主机名自行修改，三台虚拟机需要能联网，并且能够免密登录，这些网上都能找到详细的教程，有问题也可以底部留言交流。 ip 名称 内存 172.17.0.169 node169 16G 172.17.0.170 node170 16G 172.17.0.171 node171 16G 2.安装JDK 百度网盘 链接：https://pan.baidu.com/s/1eR-ZAZNLBZwSLgUSmmlfEQ 提取码：95yu 2.1 创建
CDH6离线安装 -
04-01
CentOS7 下离线安装CDH6，绝对可用。 各种坑的解决，强烈建议收藏，因为CDH6和CDH5离线安装区别很大，官方网文档太混乱，这个是非常清晰的概括总结
cdh6需要的allkeys.asc
04-27
在安装cdh6.3.2时提示找不到allkeys.asc的问题解决办法，解压出来的文件放到/var/www/html/cm6下，此目录名cm6称根据你实际配置修改即可。此文件适合cdh6所有版本。提供免费下载，欢迎下载！ 把解压出来的文件allkeys.asc放到你自己目录即可
基于Contos7.X+CDH6.2.0大数据平台搭建(上)
永青技术博客
03-06 1352
目录 一、CDH6.2官网介绍 二、CDH6.1.0安装前环境的部署 三、CDH6.1.0安装 四、CDH6.1.0的初始化 五、CDH6.1.0的优化 六、CDH6.1.0集群安装 一、CDH6.2官网介绍： CDH(Cloudera's Distribution,including Apache Hadoop).是Haoop众多分支中的一种大数据，简称CDH，基于最稳定版...
CentOS7上CDH6.2搭建
wachoo的blog
09-01 1161
CDH架构 Cloudera Manger 架构 CDH 6.2.0 组件版本 完整参考：https://docs.cloudera.com/documentation/enterprise/6/release-notes/topics/rg_cdh_62_packaging.html#cdh_packaging_60x 演示集群系统软件版本 操作系统：centos 7 64位 CDH：6.2.0 JDK：1.8 虚拟机设置 Step1: 安装虚拟机 建...
CDH6安装教程(亲自测试越坑版)
IT- 研究者
09-12 6782
一、Hadoop大数据平台 1、Hadoop 发行版 (1) 完全开源的原生的Apache Hadoop (2) Cloudera与Hortonworks公司的CDH和HDP：在Cloudera和Hortonworks合并后，Cloudera公司推出了新一代的数据平台产品CDP Data Center（以下简称为CDP） (3) MapR公司的MapR(已经被HPE收购) (4) AWS亚马逊的EMR (5) 国内华为的fusioninsight (
CDH6.2离线安装（史上最全安装文档）-Lyer整理版
最新发布
sinat_36709196的博客
09-27 1382
CDH6.2大数据集群环境安装
cloudera manager的agent安装时候 出现的问题
xiaoyutongxue6的博客
10-24 1万+
/tmp/scm_prepare_node.K0tOAFSy  using SSH_CLIENT to get the SCM hostname: 10.221.5.140 33607 22  opening logging file descriptor  正在启动安装脚本... 正在获取安装锁... BEGIN flock 4 END (0)  正在检测根权限... effectiv...
CentOS7安装CDH6.2.0以及CDH安装过程的坑
Alex的博客
06-03 1933
Can't open /var/run/cloudera-scm-agent/process/261-hdfs-DATANODE/supervisor.conf: Permission denied. 这个问题先处理权限问题，处理完事儿后再试， sduochmod-R777/usr/local/hadoop/logs chown-Rcloudera-scm:cloudera-scm/var/* 不行再用第二种方法； 怀疑是权限问题，上网查询了之后，才知道看起来...
获取Cloudera Manager 6.2.0和CDH 6.2.0 el7版本资源包
10. CDH-6.2.0-1.cdh6.2.0.p0.967373-el7.parcel 和 CDH-6.2.0-1.cdh6.2.0.p0.967373-el7.parcel.sha1: 这些是CDH的完整安装包，包括Hadoop核心组件，如HDFS、YARN、Hive、Pig等，以及配套的管理和安全工具。...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值