
Java
文章平均质量分 92
白桃気泡水-
这个作者很懒,什么都没留下…
展开
-
Hive整合Hbase
Hive-2.3.3Hive与HBase整合的实现是利用两者本身对外的API接口互相通信来完成的,其具体工作交由Hive的lib目录中的hive-hbase-handler-*.jar工具类来实现2、应用场景将ETL操作的数据存入HBase。原创 2022-11-04 19:07:06 · 694 阅读 · 0 评论 -
hive对数据库及表的操作
hive对数据库及表的操作原创 2022-10-21 10:03:00 · 1329 阅读 · 0 评论 -
Hive安装与配置及常见问题解决
hive是基于Hadoop构建的一套数据仓库分析系统,它提供了丰富的SQL查询方式来分析存储在Hadoop分布式文件系统中的数据:可以将结构化的数据文件映射为一张数据库表,并提供完整的SQL查询功能;可以将SQL语句转换为MapReduce任务运行,通过自己的SQL查询分析需要的内容,这套SQL简称Hive SQL,使不熟悉mapreduce的用户可以很方便地利用SQL语言查询、汇总和分析数据。而mapreduce开发人员可以把自己写的mapper和reducer作为插件来支持hive做更复杂的数据分析。原创 2022-10-14 10:33:33 · 1141 阅读 · 0 评论 -
MapReduce课程设计 好友推荐功能
分析:第一个为直接好友,也就是说,Tom 和hello 和hadoop 和cat是直接好友关系,而他们之间是 间接好友关系,但是间接好友 关系不一定就不是直接 好友关系,而我们要找的就是间接好友的关系,//如果一直为1n那就是间接关系然后就累加几次。//combiner组件。//若路径存在则将其删除。//获取虚拟机配置信息。推荐者与被推荐者一定有一个或多个相同的好友,存在一个共同好友,值为1;* 直接好友关系值为0。* 间接好友关系值为1。全局去寻找好友列表中两两关系,统计两两关系出现次数。原创 2022-09-30 16:29:26 · 1029 阅读 · 0 评论