day_ue的博客

这里主要记录一下，我们常用的maven配置，方便后期开发配置环境，避免每次都从零开始配置工程。

Spark读取Es空字符串问题问题描述：order_tp在Es中存储为空字符串，读取到Spark中会出现各种意想不到的问题。ES中存储格式{ "_index": "dwd_monitor_yuepengfei_test", "_type": "doc", "_id": "15", "_score": 1, "_source": { "chnl_cd": "10", "order_tp": "" }}

cache、persist、checkpoint、spark

spark的shuffe及其演化发展过程