本地IDEA远程连接hive的问题解决

最新推荐文章于 2025-05-23 11:05:34 发布

请叫我超哥

最新推荐文章于 2025-05-23 11:05:34 发布

阅读量2k

点赞数

CC 4.0 BY-SA版权

分类专栏： spark 文章标签： spark本地连接hive

本文链接：https://blog.youkuaiyun.com/qq_39719415/article/details/99735803

1：首先创建好一个maven项目，创建项目这一步我就不说了，如果不会的话请看我的另一篇博客，完成后在porm.xml中加入依赖，这里需要注意要有hadoop-client，且不使用默认的hhadoop-client版本。

<dependencies>
    <!-- https://mvnrepository.com/artifact/org.apache.spark/spark-sql -->
    <dependency>
        <groupId>org.apache.spark</groupId>
        <artifactId>spark-sql_2.11</artifactId>
        <version>1.6.0</version>
    </dependency>
    <!-- https://mvnrepository.com/artifact/org.apache.spark/spark-core -->
    <dependency>
        <groupId>org.apache.spark</groupId>
        <artifactId>spark-core_2.11</artifactId>
        <version>1.6.0</version>
        <exclusions>
            <exclusion>
                <!--默认是1.0.4版本，要去掉-->
                <groupId>org.apache.hadoop</groupId>
                <artifactId>hadoop-client</artifactId>
            </exclusion>
        </exclusions>