Scala之判断hdfs路径

最新推荐文章于 2020-12-19 21:45:48 发布

原创最新推荐文章于 2020-12-19 21:45:48 发布 · 1.5k 阅读

0 ·

CC 4.0 BY-SA版权

Scala笔记专栏收录该内容

8 篇文章

订阅专栏

本文介绍了一段使用Java代码检查Hadoop HDFS中指定路径是否存在及其类型的方法。通过实例演示了如何创建Hadoop配置，获取文件系统实例，并判断指定路径是否为目录或文件。

import java.net.URI
val putPath = new Path(modelPath)
val conf = new Configuration()
val hdfs = FileSystem.newInstance(URI.create(modelPath),conf)

if (hdfs.exits(putPath)){
println("1")}
else{println("2")}

if (hdfs.getFileStatus(putPath).isDirectory){
println("3")}
else{println("4")}