
hadoop
文章平均质量分 86
hadoop从0到1学习
pmdream
每天进步一点点,如果没有学习那就是倒退
展开
-
[hadoop]3.0.0以上版本运行hadoop-mapreduce-examples的wordcount官方示例
前言:上一篇:[hadoop]3.0.0以上版本运行hadoop-mapreduce-examples的pi官方示例(踩坑日记)这次来进行wordcount的demo测试~从环境到运行,到博客输出花了两个小时。。。这个demo应该能很快;1. 准备数据放到HDFS上面Q1:我的HDFS怎么上传呢?这个是传一个文件到hdfs的根目录 后面的/hadoop fs -put /Users/bjhl/Documents/工作记录/hadoop/data.txt /然后看一下内原创 2021-01-26 21:00:37 · 761 阅读 · 0 评论 -
[hadoop]3.0.0以上版本运行hadoop-mapreduce-examples的pi官方示例(踩坑日记)
前言:hadoop环境都配置好了。运行官方示例1. 下载官方示例的jar2. 运行命令hadoop jar hadoop-mapreduce-examples-3.3.0.jar pi 5 52.1 遇到问题:任务卡住Number of Maps = 5Samples per Map = 52021-01-26 16:49:28,195 WARN util.NativeCodeLoader: Unable to load native-hadoop library for you原创 2021-01-26 16:57:04 · 8582 阅读 · 4 评论 -
[hadoop]3.0.0版本以上mac hadoop环境配置安装,以及安装的一些坑解决
[hadoop]3.0.0版本以上mac hadoop环境配置安装,以及安装的一些坑解决原创 2021-01-26 14:46:37 · 3542 阅读 · 6 评论