goldlone的博客

Standalone下Spark配置HA(High Availablity) http://spark.apache.org/docs/1.6.3/spark-standalone.html#high-availability 在默认情况下，Standalone的集群调度对Worker具有容错性，因为当Worker节点崩溃后可以将Application移动到其他可用节点。但是调度程序依靠Mas...

Spark 算子 RDD支持两种类型的算子， transformation （从现有的数据集创建新的数据集）和 action （从数据集上运行计算后将值返回到驱动程序） transformation算子并不会立即进行计算，只记录依赖于哪个数据集，仅当需要将结果返回驱动程序时才进行计算转换（即遇到action算子）。这种设计使Spark能够更有效地运行 。 默认情况下，每次对其执行操作时，都可以重新...

DBUtil.scala import java.sql.{Connection, DriverManager, PreparedStatement, ResultSet, Statement} import java.util.concurrent.{BlockingQueue, LinkedBlockingQueue} /** * JDBC 工具类 * @author Created...

最原始：https://blog.youkuaiyun.com/jiangwlee/article/details/51492507 转载：https://blog.youkuaiyun.com/WangJinLong_cu/article/details/84145973 转载的文章中更明确地说明了结论。