Spark
关注
分享
扫一扫
卡列宁的微笑66
这个作者很懒，什么都没留下…
展开
-
Spark从 Mysql 数据库读写文件
1.引入maven依赖 <dependencies> <dependency> <groupId>org.apache.spark</groupId> <artifactId>spark-core_2.11</artifactId> &...原创 2019-10-08 18:40:23 · 208 阅读 · 0 评论 -
Spark从 Hbase 读写文件
由于 org.apache.hadoop.hbase.mapreduce.TableInputFormat 类的实现，Spark 可以通过Hadoop输入格式访问 HBase。 这个输入格式会返回键值对数据，其中键的类型为org. apache.hadoop.hbase.io.ImmutableBytesWritable，而值的类型为org.apache.hadoop.hbase.client....原创 2019-10-08 20:41:28 · 223 阅读 · 0 评论 -
Spark Streaming 读取Kafka数据
1.引入Maven依赖 <dependency> <groupId>org.apache.spark</groupId> <artifactId>spark-core_2.11</artifactId> <version>2.1.1</vers...原创 2019-10-11 17:02:24 · 283 阅读 · 1 评论