yonghutwo的专栏

本机环境： ubuntu 12.04 hadoop 1.1.2 mysql 5.5.35  安装hive版本0.12.0 一、创建用户hive，并授权: root用户登录mysql,执行以下命令： use mysql; insert into user(Host,User,Password) values("localhost","hive",password("hive"

Hive作为Hadoop家族的重要一员，具有学习成本低，开发者可通过类SQL语句快速实现简单的MapReduce统计，不必开发专门的MapReduce应用。在攒库中，Hive也不负众望，得到了非常高的票数。为此，优快云知识库特邀社区专家蒋守壮（博客： http://blog.youkuaiyun.com/jiangshouzhuang ）绘制了Hive技术图谱，帮助广大开发者更加系统、全面的学习Hive技术

Hive数据压缩 本文介绍Hadoop系统中Hive数据压缩方案的比较结果及具体压缩方法。 一、压缩方案比较 关于Hadoop HDFS文件的压缩格式选择，我们通过多个真实的Track数据做测试，得出结论如下： 1.  系统的默认压缩编码方式 DefaultCodec 无论在压缩性能上还是压缩比上，都优于GZIP 压缩编码。这一点与网上的一些观点不大一致，网上不少人认为GZIP

原表数据如下,业务场景是取用户的top5站点访问情况，行号是根据访问次数降序生成。 用户ID  | 站点名   |  流量   |访问次数  |行号 user_id |site_name |all_flow |net_times |rn 1          a           10         5       1 1          b           23        

说下hive中的null。 employee表 hive>desc employee; empid   string deptid   string salary   string 查询employee hive>select * from employee 1 NULL NULL hive 中null实际在HDFS中默认存储为'\N' 即employee中的数据在HDFS中为

随着云计算和hadoop的发展，去IOA随之在各个行业开展起来。去o的过程必然涉及到一些sql用mr或hive改写的过程。本文就是在实际工作中涉及到hive改造oracle存储过程时用hive实现minus函数。

跑hive脚本也就是mr程序时遇到以下错误： Ended Job = job_1406698610363_0394 with errors Error during job, obtaining debugging information... Examining task ID: task_1406698610363_0394_m_000014 (and more) from job jo

由于 Hive 是针对数据仓库应用设计的，而数据仓库的内容是读多写少的。因此，Hive 中不支持对数据的改写和添加，所有的数据都是在加载的时候中确定好的。而数据库中的数据通常是需要经常进行修改的，因此可以使用 INSERT INTO ...  VALUES 添加数据，使用 UPDATE ... SET 修改数据

UDF(user defined function).hive的UDF包含三种：UDF支持一个输入产生一个输出

登陆hive所在机器（172.2.2.12）启动Starting Hive Thrift Server 命令：bin/hive --service hiveserver -p 10001 -p指定Thrift Thrift 端口，若不指定默认为10000 也可以将Hive Thrift Server放在后台执行：bin/hive --service hiveserve