changyuan101的博客

1 遇到的坑 1、maven 未引入hadoop-client,结果报错误，找不到 Could not locate executable null\bin\winutils.exe in the Hadoop binaries.                   org.apache.hadoop hadoop-client 1.2.1

由于业务数据量大，使用普通查询统计已不能满足需求，所以使用spark+mongodb进行聚合统计，两种方案 1使用quartz调度spark，定时进行业务数据统计 2使用crontab调度spark，定时进行业务数据统计  为了便于管理最终使用方案1  quartz调度代码这里就不展示了，只写spark+mongodb调用 1 引入maven依赖            o