koukan3的博客

一、 需求从HBase集群中读取数据，并写入到集成了Geomesa 的HBase集群中。地理信息数据（点Point）需要保存为Geometry对象。二、遇到的问题1.使用Spark结合Geomesa写入HBase时，空指针异常NullPointerException执行以下代码写入HBase时，报空指针异常：dataFrame.write.format("geomesa")....

import org.apache.commons.cli.CommandLine;import org.apache.commons.cli.Options;import org.apache.commons.cli.ParseException;import org.apache.commons.lang.StringUtils;import org.apache.hadoop.h...

一、理论知识（一）加载数据到HBase的三种方法：通过MR job，使用TableOutputFormat加载到表中。（效率较低） 核心的原理还是使用htable的put方法，不过由于使用了mapreduce分布式提交到hbase，速度比单线程效率高出许多。 通过客户端API，写入表中。（效率较低） 通过Bulk load 运行MR job将数据输出为hbase内部格式，再加载数据到...

<dependencies> <dependency> <groupId>org.apache.hadoop</groupId> <artifactId>hadoop-hdfs</artifactId> <version>2...

<dependencies> <dependency> <groupId>org.apache.hbase</groupId> <artifactId>hbase-client</artifactId> <!--版本从2.1.0改为...

<dependencies> <dependency> <groupId>org.csource</groupId> <artifactId>fastdfs-client-java</artifactId> <version>...

<dependencies> <dependency> <groupId>org.elasticsearch.client</groupId> <artifactId>elasticsearch-rest-high-level-client</arti...