闹丶

HDFS 常用API /** * 查看HDFS内容 */ @Test public void text()throws Exception { FSDataInputStream in = fileSystem.open(new Path("/cdh_version.properties")); IOUtils.copy...

使用HDFS API操作HDFS文件系统Intellij IDEA使用maven 管理项目创建项目点击Finish出现如下界面需等待右下角蓝条加载完成(下载时间较长，需耐心等待蓝条加载完成)...

整体的hdfs命令行操作，类似于shell命令hadoop命令操作详解hadoop fs [generic options] [-appendToFile <localsrc> ... <dst>] # 添加本地文件到HDFS [-cat [-ignoreCrc] <src> ...] # 查看内容 [-chgrp [-R] GROUP ...

jps显示正确，但是浏览器http://hadoop:50070却打不开防火墙问题查看防火墙是否打开sudo firewall-cmd --state显示running关闭防火墙sudo systemctl stop firewalld.service检查是否关闭sudo firewall-cmd --state显示not running重新用浏览...

实践6 – HBase Shell基本命令HBase搭建和配置下载并解压需先配置好zookeeper配置系统环境变量vi /etc/profile增加export HBASE_HOME=/path/of/your/hbase-1.2.0-cdh5.7.0export PATH=$HBASE_HOME/bin:$PATH配置HBasecd $HBASE_HOME/c...

hadoop配置与应用实践1 – 单机配置hadoop单主机伪分布 —— 用于实验和开发环境环境要求单台主机 192.168.56.10操作系统 Centos7.2最小安装hadoop hadoop-2.6.0-cdh5.7.0环境准备主机名hostnamectl set-hostname master2. 配置hostsvi /etc/hosts添加192...

编写MapReduce程序编写wordcount程序场景：有大量文件，里面存储了单词，且一个单词占一行任务：如何统计每个单词出现的次数类似应用场景：搜索引擎中，统计最流行的K个搜索词统计搜索词频率，帮助优化搜索词提示编辑pom.xml，添加jar包maven添加jar包可查询：https://mvnrepository.com/<!-- 添加仓库 -->&l...