- 博客(3)
- 收藏
- 关注
RSS订阅转载 IDEA常用快捷键
Mac系统IDEA常用快捷键： http://intellij.linesh.tw/ 转载于:https://www.cnblogs.com/oush/p/11489161.html
2019-09-08 23:15:00
132
转载 Spark中foreachRDD的正确使用
常出现的使用误区： 误区一：在driver上创建连接对象（比如网络连接或数据库连接） 如果在driver上创建连接对象，然后在RDD的算子函数内使用连接对象，那么就意味着需要将连接对象序列化后从driver传递到worker上。而连接对象（比如Connection对象）通常来说是不支持序列化的，此时通常会报序列化的异常（serialization errors）。因此连接对象必须...
2019-09-08 23:07:00
1194
转载 Spark源码编译
一、源码下载 spark源码下载：http://spark.apache.org/downloads.html 下载各个历史版本的源码包在这里下载：https://archive.apache.org/dist/spark/ 我下载的是：spark-2.1.0.tgz 二、编译源码 1、编译环境：MacBookPro10.14.5 java version: 1.8....
2019-09-07 16:59:00
198
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人