
Hadoop
hadoop
clonechen2021
这个作者很懒,什么都没留下…
展开
-
HBase的读写流程
HBase的写流程Client访问zookeeper获取指定的RegionServer的地址(缓存meta表)Client向RegionServer发起写请求,RegionServer接收数据写入内存当MemStore大小达到一定值时会将数据flush到StoreFile文件并且存储在HDFS上RegionServer管理着多个Region,每个Region对应着一个HLog实例...原创 2020-05-08 17:16:37 · 1385 阅读 · 0 评论 -
逐步掌握HBase的Java API常用操作
文章目录引入依赖连接工具类基础工具类基础工具类测试HBase过滤器使用综合案例引入依赖首先需要引入HBase相关依赖 <dependency> <groupId>org.apache.hbase</groupId> <artifactId>hbase-client</artifactId&...原创 2020-05-08 17:10:54 · 2174 阅读 · 0 评论 -
CentOS下安装伪分布式HBase
文章目录本文使用安装包的版本JDK安装SSH免密登录配置Hadoop安装HBase安装配置自己的zookeeper配置phoenix本文针对没有JDK和Hadoop的情况下的安装,如果已经配置好了JDK环境和Hadoop环境的可以跳过对应的章节进行观看本文使用安装包的版本JDK:1.8Hadoop:hadoop-2.6.0-cdh5.7.0HBase:hbase-1.2.6zooke...原创 2020-04-01 16:45:55 · 928 阅读 · 0 评论 -
基于hadoop的评价预测实现
Hadoop课程结课设计时老师让做一个评价预测,完成后将核心的要点记录下来,方便后续同学可以参考hadoop-word-predict基于hadoop的评价预测系统实验的题目如下编写java程序,使其能够实现基于上传至hdfs的“学号_上传文件.txt”数据集训练情感分类器的目的。在训练的过程中,应过滤包含非中文字符或全部由非中文字符构成的词语。保存模型文件至“学号_模型.txt”文件中。...原创 2020-02-24 21:22:09 · 2890 阅读 · 5 评论