
spark
apache-bbccb
这个作者很懒,什么都没留下…
展开
-
Kafka+Spark Streaming+Redis实时计算整合实践
原文地址 http://shiyanjun.cn/archives/1097.html基于Spark通用计算平台,可以很好地扩展各种计算类型的应用,尤其是Spark提供了内建的计算库支持,像Spark Streaming、Spark SQL、MLlib、GraphX,这些内建库都提供了高级抽象,可以用非常简洁的代码实现复杂的计算逻辑、这也得益于Scala编程语言的简洁性。这里,我们基于转载 2015-09-02 10:52:13 · 2603 阅读 · 0 评论 -
scala读取hbase
import org.apache.hadoop.hbase.{HBaseConfiguration, HTableDescriptor}import org.apache.hadoop.hbase.mapreduce.TableInputFormatimport org.apache.spark.rdd.NewHadoopRDDobject HbaseTest { def main(转载 2015-12-15 09:48:33 · 2672 阅读 · 0 评论 -
spark 常用命令
转载 http://homepage.cs.latrobe.edu.au/zhe/ZhenHeSparkRDDAPIExamples.html#aggregate Zhen HeAssociate ProfessorDepartment of Computer Science and Computer Engineering转载 2016-07-15 08:32:40 · 2133 阅读 · 0 评论