日格一物

问题背景​昨晚 Mac 直接粗暴退出全部 APP, 第二天才发现连虚拟机也直接退出( 通常先将虚拟机挂起或关机再退出app). 于是重新连接, 两个节点连接成功, 最后一个节点连接多次尝试均超时.分析过程先测试 ping 最后一个节点ip 是否可以通, 发现报错:➜ ~ ping 192.168.229.151PING 192.168.229.151 (192.168.229.151): 56 data bytesping: sendto: Host is downping: send

背景: 安装了最新的 MySQL 8.0 存点东西, 使用 DBeaver 连接时报错 (公司限制仅建议使用这个), 然后连接时报错报错信息一: The server time zone value '�й���׼ʱ��' is unrecognized or represents more than one time zone. You must configure either the server or JDBC driver (via the serverTimezone configurati

备忘hive里面select count(*)为0，select * 有数据

问题背景Hive 中加工了几张大表, 每张都大约有 350 个字段左右. 并且因为业务原因每个字段都比较长 (大约20个字符左右, 有长有短, 最长可达30多个字符). 加工完成, 多次确认不存在语法错误后运行, 仍然报错.此时,这几张运行失败的表有共同特点, 可以作为后续处理失败的突破点: 每张表的字段很多, 且每个字段都很长.报错信息[ERROR] Error while processing statement: FAILED: Execution Error, return code 1 f

背景源端数据在 Oracle 中, 迁移至 Hive 处理对空值进行筛选.提问: Hive 中 null 进行筛选时应如何判断 ?在 Oracle 中判断是否为空, 可以直接使用 is null / is not null.在 Hive 中使用同样方式得到的结果会有问题 (因为丢失了对空字符串 '' 的判断, 引号中没有空格).本质在 Oracle 中写入数据时没有空字符串 '' 的概念, 插入空串时写入为 null.而 Hive 中既可以写入空字符串 '' , 也可以写入 null.探

问题背景: 集群间通过导出导入来批量迁移脚本及作业调度配置时, 由于两集群之间某个参数名称发生改变, 故需要统一对导出的文件进行递归修改文件中发生改变的参数名称, 如此再导入到新集群中, 方才能正常运行.处理方式: 使用 shell 递归修改➜ ~ cd /Users/dooo/Downloads/work/shell➜ shell cat recursiveReplaceField.sh#! /bin/zshfunction read_dir(){for file in `ls $1`d

linux 定时监控重启挂掉进程产生背景: 在 k8s 集群安装 SQLFlow 后, 每过一段时间 sqlflow-server、sqlflow-jupyter、argo-server 三个进程就会自己挂掉. (在 sqlflow 官网中也提到该问题, 说是 Kubernetes 内置逻辑，重新运行端口映射命令即可)解决方式: 使用 shell 脚本, 定时每分钟检查三个进程是否挂掉, 若挂掉则重启, 否则输出 already started![root@dooo ~]# cd /sqlflow/s

oracle 插入数据时报错背景: mysql 中缺少一些很好用的 udf, 因此将数据导入到 oracle 中进行处理, 但是在插入数据时报错报错信息: ORA-00933: SQL command not properly ended报错原因: oracle 不支持 mysql 中一次插入多条数据的语法修改方式: 统一修改为如下形式即可INSERT INTO xxx.xxx (id,name,pid) VALUES ('1','aa',''); INSERT INTO xxx.xxx (i

1.找到自己的 mysql 安装目录, 进入 bin/➜ ~ cd /usr/local/Cellar/mysql@5.7/5.7.31/bin➜ bin ls | grep "safe"mysqld_safe➜ bin mysqld_safe --skip-grant-tables2020-10-28T03:35:24.6NZ mysqld_safe Logging to '/usr/local/var/mysql/dooo.err'.2020-10-28T03:35:24.6NZ m

背景: 在虚拟机中安装 mysql 客户端访问在 Mac 本地中安装的 mysql5.7 失败.报错信息:[root@centos7 /]# mysql -h192.168.137.1 -P3306 -uroot -pEnter password:ERROR 2003 (HY000): Can't connect to MySQL server on '192.168.137.1' (111)远程访问命令:mysql -h服务器ip地址 -P3306 -uroot -p需要注意的问题:虚

问题: 使用 yum 安装 docker, 在设置镜像仓库时报错[root@ecs-jc ~]# yum-config-manager --add-repo http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo File "/usr/bin/yum-config-manager", line 135 except yum.Errors.RepoError, e:

问题场景: 往Oracle表中插入数据,仅在当前执行插入SQL的窗口可以查到数据,切换窗口后查不到最新插入的数据产生原因: Oracle的自动提交默认是关闭的错误写法: 这样的SQL, 在其他窗口或者关闭该窗口后查询不到新增的数据; 该数据仅在内存中, 并未提交insert into table_a (a,b,c)values ('xxx','xxxxxx','xxxxxxxx');解决方式: 手动 COMMIT提交insert into table_a (a,b,c)values ('xx

产生原因: Oracle 插入时间时格式与数据库中时间格式不一致错误样例: 执行下面 SQL, 则报错 ORA-01861insert into table_a (kssj, jssj)values ('2020-09-01 00:00:00','9999-12-30 00:00:00')解决方式: 将你插入的时间格式化 to_date(‘xxx’,‘yyyy-mm-dd hh24:mi:ss’),insert into table_a (kssj, jssj)values (to_d

产生原因: 类型不匹配我本次遇到的错误是: 类型不匹配的赋值操作错误摘录: DECLARE LS_DJXH NUMBER(20); ...BEGIN for v_cur in (select djxh from DJ_NSRXX) LOOP insert into ylcs.fp_dk_sq (DJXH, ...) values ('LS_DJXH', ...);错误分析: LS_DJXH 字段类型为 number, 但是插入

报错信息: Expression not in GROUP BY key ‘xxx’报错含义: 字段 ‘xxx’ 没有在 group by 中产生原因:某些字段 ‘xxx’, 在 select 后的字段中出现, 却没有在 group by 后的字段中出现;如下 sql 会报错, 因为, c 字段没有出现在 group by 后面select a, b, c from table_a group by a, bHive 编程指南中指出 :GROUP BY 语句通常会和聚合函数一起使用,按

在 Oracle 中为物化视图添加视图名注释时报错执行语句:COMMENT ON VIEW xxx.view_a AIS '视图A';报错信息:ORA-32594: COMMENT 命令的对象类别无效产生原因: Oracle 版本间语法细节不同导致在 9i 下，只能用 COMMENT ON TABLE 加注释, 在 10g 开始失效;在 11g 下，只能用 COMMENT ON MATERIALIZED VIEW ;查询 Oracle 版本: select * from v$versio

PostgreSQL 错误 [42804]: ERROR: UNION types text and timestamp without time zone cannot be matched产生原因: 使用 UNION 联合多段 sql 语句时,每段 sql 中的相同字段类型不一致如下图所示,字段 zzsj 在 table_a 中类型为 timestamp ,在 table_b 中类型为字符串,此时进行 union 操作, 就会报错: 文本和时间戳无法匹配解决方式: union 时将相同字段转化成

在 Oracle 中下面 sql 片段报错: ORA-01810: format code appears twiceto_date('2006-06-01 18:00:00' 'yyyy-mm-dd hh:MM:ss')产生原因: Oracle中的日期格式不区分大小写,所以 mm 出现了两次, 因此报错: 格式代码出现两次在 Oracle 中正确的写法是：to_date('2006-06-01 18:00:00' 'yyyy-mm-dd hh:mi:ss')FORMAT : HH H

在 Hive 处理数据过程中遇到报错: Both left and right aliases encountered in JOIN失败原因: Hive 不支持两表 join 时, 两表的字段间的非相等条件修改方式:① 将两个非相等条件放在 where 后面上述红框圈中地方, 修改为如下 .... ) ybnsrsb on nsrxx.djxh = ybnsrsb.djxh where ybnsrsb.skssqq <= jsqz an