TheManOfCoding的博客

存储，学习，共享转自大神 http://www.oratea.net/?p=944 UNIX时间戳转日期函数: from_unixtime语法: from_unixtime(bigint unixtime[, string format])   返回值: string 说明: 转化UNIX时间戳（从1970-01-01 00:00:00 UTC到指定时间的秒数...

一：Hive的几种内置服务             执行bin/hive --service help  如下：      [master@master1 hive]$ bin/hive --service helpls: 无法访问/opt/spark/lib/spark-assembly-*.jar: 没有那个文件或目录Usage ./hive <parameters> --serv...

Exception：Caused by: org.datanucleus.exceptions.NucleusException: Attempt to invoke the "BoneCP" plugin to create a ConnectionPool gave an error : The specified datastore driver ("com.mysql.jdbc.Drive...

运行环境：用图形更直观点。在 spark cluster 和 yarn cluster 两种方式运行spark sql， 操作hive中的数据，另外，hive 是独立的，可以直接运行hive处理数据。spark sql的程序比较好写，直接看spark的example的例子HiveFromSpark ，很容易理解首先，在spark cluster上运行：将hive的   hive-site.xml ...

1.将DataFrame数据如何写入到Hive表中？2.通过那个API实现创建spark临时表？3.如何将DataFrame数据写入hive指定数据表的分区中？从spark1.2 到spark1.3，spark SQL中的SchemaRDD变为了DataFrame，DataFrame相对于SchemaRDD有了较大改变，同时提供了更多好用且方便的API。DataFrame将数据写入hive中时，默...