阿年的博客

对比MySQL和Hive中的行转列、列转行方法，其中Hive列转行有两种方法，一种侧窗、一种union

拉链表的设计思路，如何制作，实践踩坑......

Error while processing statement: FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.MoveTask. Exception when loading 2 in table dim_user_zip with loadPath=hdfs://hadoop101:8020/warehouse/gmall/dim/dim_user_zip/.hive-staging_hive_20

Hive中的复杂数据类型，学会如何使用，如何指定字段为struct类型？如何向struct类型的字段中插入数据？如何取出struct字段中的值？

分析用户每个会话的行为轨迹

向Hive分区表中load数据报错：FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.MoveTask. Directory hdfs://hadoop101:8020/warehouse/gmall/ods/ods_order_info/dt=2021-01-03 could not be cleaned up.可能是手动删除数据导致元数据没有被删除，所以再次load数据报错，解决办法是将表删除再重新创建

year()函数的使用 - 获取日期的年份

cast(a as int )，hive中数据类型的转换

先以sku_id和create_date分组，然后求sum(sku_num)，求出一天的销量然后以销量倒序排序，进行编号，取最高的，也就是目标行。

date_format()、substring()函数切割时间，求每日新增用户数的思路

substring()、date_add()、datediff()

substring()、dense_rank()、over()

lead()、date()、datediff()、concat()函数的使用，嵌套子查询的优化with a as()

查询用户的累计消费金额及VIP等级，rows between unbounded preceding and current row；case when 分类

查询各品类销售商品的种类数及销量最高的商品

查询至少连续三天下单的用户，date_sub()、row_number()

查询累计销量排名第二的商品，dense_rank()、nullif()、over()函数的使用

hive常用函数案例实操

冷静的分析，清晰的解题思路，教你学会用Hive求连续几天登录/消费 之类的问题

查看数据库： show databases;创建数据库： create database [if not exists] test01; create database test02 comment 'this is a database' location '/myCreateDatabase/';其中方括号中的内容为可选项，意思是：如果不存在数据库test01则创建。第二条创建语句comment选项后指定的是该数据库的备注信息，原生的hive不支持中文，想要支持中文要修..

初始化报错的异常信息：[root@master conf]# schematool -initSchema -dbType mysqlSLF4J: Class path contains multiple SLF4J bindings.SLF4J: Found binding in [jar:file:/export/servers/hive/lib/log4j-slf4j-impl-2.6.2.jar!/org/slf4j/impl/StaticLoggerBinder.class]SLF4J: