cuixiuqin1954的专栏

hive函数参考手册 原文见：https://cwiki.apache.org/confluence/display/Hive/LanguageManual+UDF 1.内置运算符 1.1关系运算符 运算符 类型 说明 A = B 所有原始类型 如果A与B相等,返回TRUE,否则返回FALSE A == B 无

select  a.mer_id ,a.goods_id ,a.goods_name ,a.goods_type ,a.serv_type ,a.price_mode ,a.push_inf ,a.mt_num ,a.cus_phone ,a.goods_desc ,a.mod_user ,a.mod_time ,a.in_time ,a.state from hf_

sqoop (发音：skup) 是一种开源工具 Sqoop是一个用来将Hadoop和关系型数据库中的数据相互转移的工具，可以将一个关系型数据库（例如 ： MySQL ,Oracle ,Postgres等）中的数据导进到Hadoop的HDFS中，也可以将HDFS的数据导进到关系型数据库中。

利用crontab 调用hive时，一定要将hive 的环境路径写成全路径

今天遇到一个这样的问题： 当在sql中写如下时： INSERT OVERWRITE TABLE 表名 partition (version='1.11') select case when 条件 then 值 else null end from 表名…… 这时候在插入表对应的hdfs文件中，存储的null值却是\N，但是通过sql查询 可以通过  查询字段 i

hive 表中如果需要用partion键进行关联其他表一定不要写在on中，正确写法要将partion键写在from中 例如： insert overwrite table dc_temp1_user_score select  a.mobile ,nvl(b.prov_des,'其他') ,nvl(b.zone_des,'其他') from (select * fro

本文转自  http://www.cnblogs.com/gwgyk/p/3997849.html 感谢原创作者！ hadoop的核心思想是MapReduce，但shuffle又是MapReduce的核心。shuffle的主要工作是从Map结束到Reduce开始之间的过程。首先看下这张图，就能了解shuffle所处的位置。图中的partitions、copy phase、sort

近一段时间从事公司hadoop集群升级工作，将原来hadoop2.3 、hbase0.98 升级到 hadoop2.6 、hbase1.2. 升级后发现原来执行的 completebulkload 操作出现问题。现在展示一下报错的内容，和解决的过程 源执行脚本 hadoop jar /home/hadoop/cdh5/hadoop-2.6.0-cdh5.10.0/share/h

本文参考： https://www.cnblogs.com/blogyuhan/p/9274784.html https://blog.youkuaiyun.com/sunnyyoona/article/details/62894761   感谢上述2位原创作者   hive 中的“行”与“列”的转换： --- 行转列 desc temp_loan_pzh_out_month_test4; OK...