
大数据
文章平均质量分 54
轩辕龙儿
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Virtual Box虚拟机文件瘦身处理
今天,突然发现配置在virtual Box虚拟机启动出错!根据错误信息提示是磁盘满了,紫萱一看虚拟机文件所在的D:盘全部被占用了。查找资料后得出结论,由于虚拟机文件在虚拟系统中删除东西后,实际占用的空间不变,这样虚拟机文件就只会变大不会变小。根据网上查找的一些资料来看,解决方法如下:(我的实体机是Windows,虚拟机是centos)1、将D:盘空出写空间来(确保虚拟机能够启动)2、将原创 2017-12-02 22:48:12 · 2919 阅读 · 0 评论 -
“Name node is in safe mode” 错误解决方法
运行hadoop程序时,有时候会报以下错误:org.apache.hadoop.dfs.SafeModeException:Name node is in safe mode那我们来分析下这个错误,从字面上来理解: Name node is in safe mode说明Hadoop的NameNode处在安全模式下。 那什么是Hadoop的安全模式呢? 在分布式文件系统启动的时候,开始的时候会有转载 2017-12-05 16:32:13 · 4871 阅读 · 1 评论 -
因为HDFS block丢失hadoop进入安全模式(Safe mode)的解决方法
1、首先强制退出安全模式,因为安全模式只能读,不能修改 执行命令:hadoop dfsadmin -safemode leave2、确认是否退出安全模式 执行命令:hadoop dfsadmin -safemode get3、删除损坏的block(但是会导致数据丢失) 执行命令:hdfs fsck / -delete原创 2017-12-07 15:45:30 · 1375 阅读 · 0 评论 -
将数据导入hive,将数据从hive导出
一:将数据导入hive(六种方式)1.从本地导入 load data local inpath 'file_path' into table tbname; 用于一般的场景。 2.从hdfs上导入数据 load data inpath ‘hafd_file_path’ into table tbname; 使用与大数据的存储 3.load方式的覆转载 2018-01-04 14:19:37 · 1311 阅读 · 0 评论