
Shell
陈伦(colby)
项目经理/数据架构师/资深数据从业者。
熟悉传统数据、互联网数据处理,精通数据仓库方法论、数据迁移、数据处理、数据可视化、数据建模、架构设计、方案设计,曾负责多个数仓项目0到1建设并落地,有PB级数据调优实战经验!
曾获得计算机四级数据库证书、PMP项目管理专业人士证书等。
展开
-
Hive批量生成DDL脚本
获取表名称,进入hivehive> show tables;将表名copy赋值给变量list然后在Linux命令行敲入:for i in $list ;dohive -S -e "show create table $i"done至于保存在哪儿,根据个人爱好而定。原创 2016-07-31 18:50:14 · 972 阅读 · 1 评论 -
crontab定时任务不执行的原因
crontab定时任务不执行的原因1、重启crontab若是遇见“You (cloudlogin) are not allowed to use this program (crontab) See crontab(1) for more information ”则切换到root用户,再使用命令#crontab -u 用户名 命令然后...转载 2019-08-28 17:42:36 · 535 阅读 · 0 评论 -
Kettle在Linux周期调度的实现
Kettle作业调度引擎:kitchen.sh一、JOB调度shell脚本#!/bin/bashcat<<EOFSHELL*****************************************************Function :xxxAuthor :colby陈CreateDate:2016-10-10ModifyDate:2016-10...原创 2019-08-29 13:42:35 · 286 阅读 · 0 评论 -
Shell实现Hive表结构全备份
登录hive服务器,新建一个shell脚本,内容如下#!/bin/bash#原样输出一段文字可以用CATcat<<EOF****************************************************功能 :实现Hive表结构备份参数 :P1,P2,P3...创建者 :XXXX创建日期 :YYYY-MM-DD修改...原创 2019-09-05 14:56:02 · 641 阅读 · 0 评论