用clojure查看hdfs文件系统

最新推荐文章于 2018-01-02 14:11:56 发布

原创最新推荐文章于 2018-01-02 14:11:56 发布 · 652 阅读

·

0

·

CC 4.0 BY-SA版权

版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

文章标签：

#clojure #import #file #path

本文介绍了一个使用 Clojure 编程语言操作 Hadoop HDFS 的示例代码，展示了如何加载配置文件、获取文件系统实例并列出根目录下的所有文件。

(add-classpath "file:///usr/hadoop/hadoop/hadoop-core-0.20.2-cdh3u1.jar")
(add-classpath "file:///usr/hadoop/hadoop/lib/commons-logging-1.0.4.jar")

(import '(java.io IOException))

(import '(org.apache.hadoop.conf Configuration))
(import '(org.apache.hadoop.fs FileSystem))
(import '(org.apache.hadoop.fs FileStatus))

(import '(org.apache.hadoop.fs Path))

(def conf (new Configuration))
(. conf addResource (new Path "/usr/hadoop/hadoop/conf/core-site.xml"))
(println (. conf get "fs.default.name"))
(def hdfs (. FileSystem get conf))
(println (. hdfs getName))
(def rootf (new Path "/"))
(. hdfs exists rootf)
(. hdfs listStatus rootf)

(for [file (. hdfs listStatus rootf)] (. file getPath))

评论

被折叠的条评论为什么被折叠?

到【灌水乐园】发言

查看更多评论

添加红包

成就一亿技术人!

hope_wisdom

发出的红包

实付元

使用余额支付

点击重新获取

扫码支付

钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。