- 博客(3)
- 资源 (3)
- 收藏
- 关注
RSS订阅转载 批量Kill yarn 任务
删除处于ACCEPTED状态的任务for i in yarn application -list | grep -w ACCEPTED | awk '{print $1}' | grep application_; do yarn application -kill $i; done
2021-01-05 11:00:05
618
原创 SparkSQL on Hive进行整合介绍
Spark on hive简介：Spark通过Spark-SQL使用hive 语句,操作hive,底层运行的还是 spark rdd。（1）就是通过sparksql，加载hive的配置文件，获取到hive的元数据信息（2）spark sql获取到hive的元数据信息之后就可以拿到hive的所有表的数据（3）接下来就可以通过spark sql来操作hive表中的数据SparkSQL与Hive整合步骤：第一步：拷贝hive-site.xml配置文件将node03服务器安装的hive目录下的conf
2020-12-21 16:03:27
216
原创 通过phoenix与Hbase整合的方式实现通过jdbc的方式去查询Hbase当中的数据
通过phoenix与Hbase整合的方式实现通过jdbc的方式去查询Hbase当中的数据一、下载Phoenix并安装下载地址：http://archive.apache.org/dist/phoenix/将安装包上传到服务器，解压到指定安装目录即可cd /temp/soft/tar -zxvf apache-phoenix-4.14.0-cdh5.14.2-bin.tar.gz -C /temp/install/二、修改Phoenix配置拷贝jar包：将Phoenix目录下的pho
2020-12-21 15:33:32
425
1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人