HDFS的API操作(通过springboot实现)

前言:

此博客为博主学习总结,博主是在windows下编程并运行代码对虚拟机中的hadoop集群进行操作。主体内容为讲述如何使用HDFS API对HDFS分布式文件系统进行操作,若有不足之处,本人很愿意得到各位大佬们的指点。

由于是在windows环境下运行代码,所以需要对java的System.setPropety的用法有简单了解

/**
     * System.setProperty的用法 简言之等同于 配置环境变量
     * 设置指定键对值的系统属性
     * setProperty (String prop, String value);
     *
     * 参数:
     * prop - 系统属性的名称。
     * value - 系统属性的值。
     *
     * 返回:
     * 系统属性以前的值,如果没有以前的值,则返回 null。
     *
     * 抛出:
     * SecurityException - 如果安全管理器存在并且其 checkPermission 方法不允许设置指定属性。
     * NullPointerException - 如果 key 或 value 为 null。
     * IllegalArgumentException - 如果 key 为空。
     * 注:这里的system,系统指的是 JRE (runtime)system,不是指 OS。
     *
     */

hadoop windows依赖文件下载

主体:

1.新建一个springboot项目,pom.xml依赖文件如下所示

<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
         xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 https://maven.apache.org/xsd/maven-4.0.0.xsd">
    <modelVersion>4.0.0</modelVersion>
    <parent>
        <groupId>org.springframework.boot</groupId>
        <artifactId>spring-boot-starter-parent</artifactId>
        <version>2.3.2.RELEASE</version>
        <relativePath/> <!-- lookup parent from repository -->
    </parent>
    <groupId>com.hadoop</groupId>
    <artifactId>demo</artifactId>
    <version>0.0.1-SNAPSHOT</version>
    <name>hadoop</name>
    <description>hadoop</description>
    <properties>
        <java.version>1.8</java.version>
    </properties>

    <dependencies>
        <dependency>
            <groupId>org.springframework.boot</groupId>
            <artifactId>spring-boot-starter</artifactId>
        </dependency>

        <dependency>
            <groupId>org.springframework.boot</groupId>
            <artifactId>spring-boot-starter-test</artifactId>
            <scope>test</scope>
        </dependency>

        <!--配置hadoop相关依赖-->
        <dependency>
            <groupId>org.apache.hadoop</groupId>
            <artifactId>hadoop
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

易霭珞

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值