Spark
关注
分享
扫一扫
努力的小码农Nick
一个想成为优秀码农的学徒级码农
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Spark提交任务方法
Spark提交任务方法有三种 1.StandAlone模式下提交 2.Spark On Yarn - client模式下提交 3.Spark On Yarn - cluster模式下提交 网上有许多这三种方法的原理，我总结一下使用这三种方法要用的代码，供大家参考 1.StandAlone: bin/spark-submit \ --class day05.SparkWC2 \ ...原创 2018-12-29 20:10:42 · 289 阅读 · 0 评论 -
Flume集成SparkStreaming的两种方式
SparkStreaming +Flume集成的push模式和poll模式 介绍: 官方文档: http://spark.apache.org/docs/2.0.2/streaming-flume-integration.html Apache Flume 是一种分布式可靠的收集、聚合、移动大量日志数据的服务. Flume and Spark Streaming to receive(接收) da...原创 2019-01-06 20:28:40 · 560 阅读 · 0 评论