
Hadoop
waylyw
数据指南 大数据指南
展开
-
已解决:sqoop mysql导入hive报错
报错内容:ERROR hive.HiveConfig: Could not load org.apache.hadoop.hive.conf.HiveConf. Make sure HIVE_CONF_DIR is set correctly.原创 2021-05-30 11:40:17 · 802 阅读 · 0 评论 -
解决:hdfs网页界面创建文件夹权限问题
错误:通过hdfs网页端创建文件夹时报如下错误Permission denied: user=dr.who, access=WRITE, inode="/":root:supergroup:drwx解决方法:执行该命令:hadoop fs -chmod -R 777 /根目录/下全部赋予读写执行权限777原创 2021-04-22 11:14:50 · 1262 阅读 · 0 评论 -
004 Hadoop概述、背景及其优势
1 Hadoop是什么Hadoop是一个由Apache基金会所开发的分布式系统基础架构,主要解决海量数据的存储和海量数据的分析计算问题,广义上来说,Hadoop通常是指一个更广泛的概念--Hadoop生态圈。2 Hadoop发展历史Lucene框架是Doug Cutting开创的开源软件,用Java代码书写,实现与Google类似的全文搜索功能,它提供了全文检索引擎的架构,包括完整的查询引擎和索引引擎。2001年年底Lucene成为Apache基金会的一个子项目。对于海量数据的场景,Lu原创 2020-11-15 19:45:32 · 719 阅读 · 0 评论