python
关注
分享
扫一扫
有梦想的人不睡觉121
大数据开发
展开
-
spark读写Elasticsearch
关于scala代码和Elasticsearch集成已经很常见了直接一个maven配置<dependency> <groupId>org.elasticsearch</groupId> <artifactId>elasticsearch-hadoop</artifactId> <version>6.1.0</ve...原创 2019-11-22 14:51:59 · 1001 阅读 · 0 评论 -
spark2.0访问ES5.1中的数据
需求是从ES中读取数据进行分析，本来想用java想用java纯代码写的，但是太麻烦，所以就用了sparksql来分析，实现需求 后来发现一个问题，单纯的java代码无法实现es数据的join操作，即使能实现也是麻烦到姥姥家，所以，贡献一下我的方案 先上依赖：测试依赖 junit junit 4.11 test原创 2017-09-26 17:11:43 · 3200 阅读 · 3 评论