
spark
无名虫
express to the day before and consider the day after
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
spark-2.4.0 源码编译
环境: hadoop2.6.0-cdh5.7.0 jdk 8 + maven 3.5.4 + scala 2.11 这里提醒下,spark2.4.0之前的版本maven使用 3.3.9+ 就可以了; spark2.2.0之前的版本支持jdk 7。 源码下载安装 [hadoop@hdp001 softwore]$ wget https://archi...原创 2019-01-06 14:32:00 · 1542 阅读 · 0 评论 -
Spark运行日志的配置
生产上作业运行日志务必要保存下来,以防出现错误无法排查 官网关于日志监控的说明: You can access this interface by simply opening http://:4040 in a web browser. If multiple SparkContexts are running on the same host, they will bind to succes...转载 2019-02-16 10:08:18 · 1765 阅读 · 0 评论