- 博客(7)
- 收藏
- 关注
RSS订阅转载 Hadoop安装中的一些问题
1、hdfs namenode -format 时出现如下报错 18/08/01 11:04:01 WARN namenode.NameNode: Encountered exception during format: java.io.IOException: Cannot create directory /home/zkpk/hadoopdata/dfs/name/current a...
2019-05-26 23:47:12
504
原创 maven+eclipse配置详解步骤
1.安装配置JDK ①官网下载Java开发工具安装包jdk-8u201-windows-x64.exe：https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html ②运行安装包，第一次选择JDK安装路径，第二次选择JRE安装路径，开始安装。 ③配置JDK的环境变量，Path添加JDK的\b...
2019-05-26 23:46:41
278
转载 HBase安装过程中遇到的问题
1、HRegionServer启动不正常 在namenode上执行jps,则可看到hbase启动是否正常，进程如下： [root@bigdata120 ~]# jps 26341 HMaster 26642 Jps 7524 NameNode 7974 NodeManager 7521 DataNode 7974 NodeManager 7703 SecondaryNameNode 7870 Re...
2019-05-26 23:46:18
1536
原创 HiveQl语句应用实例：WordCount
具体步骤如下： 1. 在linux本地创建数据源文件： touch hive.txt vi hive.txt 并随意给上一些内容 2.将hive.txt数据源文件上传到hdfs的input文件夹中 hdfs dfs -put hive.txt /input //上传文件 hdfs dfs -ls /input //查看 3.进入hive shell命令 hive...
2019-05-26 23:45:15
685
原创 Spark：我的第一个Spark应用程序：WordCount
1、启动hadoop和spark集群： start-all.sh //启动hadoop集群 start-habse.sh //启动hbase集群 ./start-all.sh //启动spark集群(在spark安装目录先的sbin文件夹下执行) 2、新建一个计频文件文件spark_scala.txt 并随意给上一些字符： touch spark_scala.txt vi spark_s...
2019-05-26 23:44:41
461
原创 运行wordcount自带实例（详述）
先确定你的hadoop集群已经启动（这很重要） 进入hadoop的mapreduce目录下： cd /opt/module/hadoop/share/hadoop/mapreduce 这个就是一会儿要运行的wordcount文件： 在当前目录下新建一个文件夹test：mkdir test 新建一个计数文件file.txt：touch file.txt 打开file.txt并随意给些字符：v...
2019-05-26 23:44:19
6361
2
转载 Redis和mongodb常用命令
Redis 1、启动redis service redisd start 2、停止redis service redisd stop 3、查看目前系统使用端口情况： ss -tanl 4、测试连接redis 连接0号库（尽量在根目录下~输入） redis-cli （使用redis直接1、4即可） 1 查询redis数据库里面有所用key 127.0.0.1:6379> keys * 增删...
2019-05-26 23:44:01
218
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人