
SPARK
文章平均质量分 91
914 JJ
这个作者很懒,什么都没留下…
展开
-
安装Spark3之后Spark-SQL读不到之前安装好的Hive 数据库
安装Spark3之后Spark-SQL读不到之前安装好的Hive 数据库前言一、问题?二、解决方案方法1.引入hive-site.xml方法2.很多步骤 ><1.增加CDH环境配置2.增加spark配置2.1 spark-defaults.conf2.2 spark-env.sh2.3 log4j.properties2.4 分发 spark软件包2.5 执行spark-sql 前言 因为之前已经 安装过CDH 其中版本为 hive 2.1.1与spark 2.2.0 , 再另外安装Spa..原创 2021-01-14 18:11:06 · 1208 阅读 · 0 评论 -
部署5节点 spark 3 分布式集群的流程
部署5节点 spark 3 分布式集群的流程 一、环境准备 搭建环境:CentOS7+Java Version: 1.8.0+Hadoop3.0.0+Spark3.0.1 之前环境已经安装:CentOS7+Java Version: 1.8.0+Hadoop3.0.0 ,所以下载Spark3,Spark3下载(http://spark.apache.org/downloads.html),如果官网无法下载,官网源码提供了其他下载路径(https://archive.apache.org/d原创 2021-01-13 13:44:42 · 402 阅读 · 0 评论