
hadoop
文章平均质量分 86
lianggangzzu
这个作者很懒,什么都没留下…
展开
-
hadoop利用FileSystem API 执行hadoop文件读写操作
Hadoop文件系统较普通的文件系统差异性主要在于其容错性,普通文件系统不能直接查看hadoop的hdfs对应的文件信息。文件存储起来之后,我们是需要可以访问才能够体现它的价值,hadoop提供了FileSystem API来进行hadoop的文件读写。 本节我是对照hadoop的API中的FileSystem类写的demo,包含了一些主要的方法,更多的需要从相关api中进行查询转载 2017-05-21 20:35:41 · 865 阅读 · 0 评论 -
hadoop连接mysql数据库执行数据读写数据库操作
目录(?)[+] 为了方便 MapReduce 直接访问关系型数据库(Mysql,Oracle),Hadoop提供了DBInputFormat和DBOutputFormat两个类。通过DBInputFormat类把数据库表数据读入到HDFS,根据DBOutputFormat类把MapReduce产生的结果集导入到数据库表中。 运行MapReduce时候报错:java转载 2017-05-21 10:10:00 · 7172 阅读 · 0 评论