
mapreduce
文章平均质量分 51
leezsj
这个作者很懒,什么都没留下…
展开
-
用mrjava代码把文件传到hbase一文中把本地地址改到网络地址报错
Exception in thread "main" java.lang.IllegalArgumentException: Pathname /D:/maven/apache-maven-3.6.3/apache-maven-3.6.3/repository/org/apache/hbase/hbase-client/1.3.6/hbase-client-1.3.6.jar from hdfs://qianfeng01:8020/D:/maven/apache-maven-3.6.3/apache-m..原创 2021-07-17 09:02:00 · 163 阅读 · 1 评论 -
用mrjava代码把文件上传到hbase
HbaseUtil.java import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.hbase.Cell; import org.apache.hadoop.hbase.CellUtil; import org.apache.hadoop.hbase.HBaseConfiguration; import org.apache.hadoop.hbase.client.*; import org.apache.hadoo.原创 2021-07-16 23:17:49 · 320 阅读 · 1 评论 -
MapReduce
MapReduce MapReduce 为什么要学习MapReduce 单机版:内存受限,磁盘受限,运算能⼒受限 ⽽⼀旦将单机版程序扩展到集群来分布式运⾏,将极⼤增加程序的复杂度和开 发难度 引⼊MapReduce框架后,开发⼈员可以将绝⼤部分⼯作集中在业务逻辑的开发 上,⽽将分布式计算中的复杂性交由框架来处理 MapReduce简介 MapReduce是Apache Hadoop项⽬的⼀个核⼼模块 MapReduce是⼀个运⾏在hdfs上的分布式运算程序的编程框架,⽤于⼤规模数 据集(⼤于1原创 2021-07-06 23:04:00 · 291 阅读 · 0 评论