
MapReduce
lxpqxl
这个作者很懒,什么都没留下…
展开
-
HBase API 操作
环境准备 HBase API 需要依赖的 pom.xml <dependency> <groupId>org.apache.hbase</groupId> <artifactId>hbase-server</artifactId> <version>1.3.1</version> </dependenc...原创 2019-12-05 09:12:55 · 1098 阅读 · 2 评论 -
大数据常见错误及解决方案
1)SecureCRT7.3出现乱码或者删除不掉数据,免安装版的 SecureCRT卸载或者用虚拟机直接操作或者换安装版的 SecureCRT 2)连接不上 mysql数据库 (1)导错驱动包,应该把 mysql-connector-java-5.1.27-bin.jar导入/opt/module/hive/lib 的不是这个包。错把 mysql-connector- ...原创 2019-11-22 11:27:09 · 3362 阅读 · 0 评论 -
集群优化的核心思路(理论)
在网络带宽、磁盘IO是瓶颈的前提下 能不使用IO 网络就不使用,在必须使用的前提下,能少用就少用。 所有的只要能够减少网络带宽的开销,只要能够减少磁盘io的使用的次数的配置项,都是集群调优的可选项。 (可选项包括: 软件层面【系统软件和集群软件】,硬件层面,网络层面) ...原创 2019-11-15 10:50:32 · 1702 阅读 · 0 评论 -
用idea初测MapReduce框架
先配置pom文件 <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocatio...原创 2019-11-12 14:43:49 · 1630 阅读 · 0 评论