
Cloudera
文章平均质量分 77
Cloudera 生态介绍、常用的组件介绍
半吊子Kyle
这个作者很懒,什么都没留下…
展开
-
CDH6.2.1 环境搭建(云服务器)
CM/CDH6.2.1 环境搭建环境准备环境介绍服务器准备服务器安全组配置CM 部署准备修改 hostname修改 hosts 文件SSH 免密登陆关闭防火墙(云服务器可忽略)关闭 SELINUX(云服务器可忽略)配置 NTP 时钟同步(云服务器可忽略)CM安装部署安装 JDK(3台)本地yum源搭建及配置CM安装Mysql 及驱动安装CM初始化数据CM启动CDH 应用部署创建集群服务部署安装常见的问题CM初始化数据错误Server启动失败环境准备环境介绍环境搭建规划腾讯云服务器 3 台 + CDH原创 2021-07-07 09:57:26 · 1785 阅读 · 4 评论 -
CDH 中使用 hive-shell
在 CDH 中使用 hive问题描述Cannot find hadoop installation: $HADOOP_HOME or $HADOOP_PREFIX must be set or hadoop must be in the path解决方案编辑 hadoop-env.sh# 1. 进入 hive 安装目录(可能不同,以自己的目录为准)cd /opt/cloudera/parcels/CDH/lib/hive/confvim hadoop-env.sh# 2. 在末尾增加如下原创 2021-11-08 11:18:55 · 1025 阅读 · 0 评论 -
大数据开发的 Maven 配置
大数据开发的 Maven 配置Maven 配置多个镜像不生效大数据开发的 Maven 配置Maven 配置多个镜像不生效你可能试过,在 settings.xml 配置文件中配置多个镜像库来实现:依赖如果不在第一个镜像库,那么就去第二个镜像仓库下载,依次类推…Maven – Guide to Mirror Settings (apache.org)在上面的 Maven 文档中已经申明,只能配置最多一个镜像仓库,Maven 是实现不了你想要的需求的,你可能看到其它博客千篇一律介绍配置了多个镜像仓库,然后原创 2021-09-28 09:13:58 · 296 阅读 · 0 评论 -
sqoop 常用命令及参数
sqoop 常用命令及参数sqoop 命令说明数据库连接相关参数import 相关参数export 相关参数hive 相关参数Sqoop User Guide (v1.4.7) (apache.org)sqoop 命令说明数据抽取方式介绍sqoop 数据抽取(即导入和导出,抽取的双方是相对的)的方式有以下两种① Sqoop API(使用较多)数据的格式支持比较少,数据允许覆盖,不要求源表和目标表字段相同 (字段名称和个数都可以不相同) ,它抽取的方式是将字段按顺序插入,不够的字段为 Null②原创 2021-08-30 21:45:24 · 1767 阅读 · 0 评论 -
Sqoop 安装及配置
Sqoop 安装及配置安装准备配置安装启动测试安装准备环境准备Hadoop 环境下载安装包配置安装① 上传解压cd /opt/servertar -zxvf sqoop-1.4.6-cdh5.14.0.tar.gz② 配置软连接ln -s /opt/server/sqoop-1.4.6-cdh5.14.0 /opt/server/sqoop③ 配置环境变量vim /etc/profile# 增加以下内容export SQOOP_HOME=/export/server/sq原创 2021-08-30 21:02:22 · 605 阅读 · 2 评论 -
Phoenix(HBase) 操作语法
Phoenix 操作语法NameSpace 操作表的操作数据操作数据查询预分区表操作视图操作二级索引全局索引本地索引覆盖索引函数索引索引案例:全局索引 + 覆盖索引索引案例:本地索引索引案例:本地函数索引参考操作文档| Apache PhoenixCDH 6.2 安装 PhoenixNameSpace 操作启用Phoenix操作NameSpace在 hbase-site.xml 中增加配置,服务端和客户端都需要增加该配置<property> <name>phoeni原创 2021-08-04 20:33:47 · 3099 阅读 · 0 评论 -
CDH 6.2 安装 Phoenix
CDH 6.2 安装 Phoenix环境说明安装前准备安装 CSD 文件安装Phoenix parcel配置HBase以用于Phoenix付费终结者,让天下寒士都能免费下载环境说明Centos 7 + CDH 6.2.1安装前准备① PHOENIX-1.0.jar② PHOENIX-5.0.0-cdh6.2.0.p0.1308267-el7.parcel③ PHOENIX-5.0.0-cdh6.2.0.p0.1308267-el7.parcel.sha④ manifest.jsonPH原创 2021-08-02 17:46:28 · 1078 阅读 · 4 评论