u011007180的博客

Spark1.4发布，支持了窗口分析函数(window functions)。 在离线平台中，90%以上的离线分析任务都是使用Hive实现，其中必然会使用很多窗口分析函数，如果SparkSQL支持窗口分析函数， 那么对于后面Hive向SparkSQL中的迁移的工作量会大大降低，使用方式如下： 1、初始化数据 创建表 [sql] view p

package com.asto.lucius.spark.sparksql import org.apache.spark.{SparkContext, SparkConf} /** * Created by Administrator on 2015/7/7. */ object TestSQL { case class Trade(user_id: String, create_t