（Windows）IDEA上运行WordCount实例

最新推荐文章于 2025-02-01 00:42:22 发布

有个机车梦

最新推荐文章于 2025-02-01 00:42:22 发布

阅读量2k

点赞数 2

CC 4.0 BY-SA版权

分类专栏： hadoop

本文链接：https://blog.youkuaiyun.com/yuz_99/article/details/90707655

本文档详细介绍了如何在Windows上的IntelliJ IDEA（IDEA）中运行WordCount实例。首先，需要配置本地Hadoop环境，具体步骤可参考链接。接着，导入项目pom文件，创建log4j.properties，并搭建WordcountDriver、WordcountMapper、WordcountReducer的包结构。启动Hadoop集群后，运行Main类，结果将在D盘output目录下展示。务必在运行前删除旧的output内容，然后可以对新的txt文件进行分析并查看成功输出的结果。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

注意：在IDEA上运行WordCount实例之前我们要在本地Windows上配置Hadoop环境。

Windows配置Hadoop环境详情请看：https://blog.youkuaiyun.com/Yuz_99/article/details/90699413
在这里插入图片描述

导入pom文件：

    <dependencies>
        <dependency>
            <groupId>junit</groupId>
            <artifactId>junit</artifactId>
            <version>RELEASE</version>
        </dependency>
        <dependency>
            <groupId>org.apache.logging.log4j</groupId>
            <artifactId>log4j-core</artifactId>
            <version>2.8.2</version>
        </dependency>
        <dependency>
            <groupId>org.apache.hadoop</groupId>
            <artifactId>hadoop-common</artifactId>
            <version>2.7.2</version>
        </dependency>
        <dependency>
            <groupId>org.apache.hadoop</groupId>
            <artifactId>hadoop-client<