
业务
小妖别跑
这个作者很懒,什么都没留下…
展开
-
递归拼复合维度key
场景:当复合维度进行分析是,为了保证查询的速度,此时就要对维度进行拼接三个维度来源维度设备维度地域维度全部来源全部设备全部地域全部来源具体设备全部地域具体来源全部设备全部地域具体来源具体设备全部地域全部来源全部设备具体地域全部来源具体设备具体地域具体来源全部设备具体地域具体来源具体设备具体地域...原创 2018-11-18 22:47:41 · 271 阅读 · 0 评论 -
hive-udf-kafka批量数据导入kafka
背景:数据存在hive中,现在需要将数据导入kafka中,为了减少中间环节,使用自定义UDF将hive数据导入到kafka中问题:UDF时对一行的处理,批量导入就会涉及多行的问题,怎么将多行数据放到一个udf中?解决思路:用collect_list函数将多行转成集合,在udf中循环遍历,发送到kafka代码package cn.kobold;import org.apache...原创 2019-01-14 11:06:20 · 2426 阅读 · 0 评论