u010918936的博客

高频数据问题，判断表是增量表还是全量表，判断两个字段关系，是不是一对一，一对多关系。

impala行转列问题

数据测试常见错误

ID与XID是联合主键，row_number()里面只按ID分组，存在同一ID同一DT有多条数据，按DT降序排序会失效，此时函数会对这多条数据随机排出123名，每执行一次脚本，结果会有差异。如果外层查询是通过限制`WHERE RN=1`来取值，那取值结果就会存在随机性。...

JOIN关联字段出现NULL值与空值的情况，如何处理

文章目录表-表比较整体思路找出不同字段的明细T1/T2两表ID相同的部分，是否存在不同NAME两表的交集与差集：判断两表某些字段是否相同两表的交集与差集：找出T2表独有的id字段-字段比较判断两个字段间一对多或多对一的关系证明id字段不是主键证明id, name字段不是联合主键数据准备表-表比较整体思路两张表条数一样条数相同是前提，然后比较字段值才有意义两表字段值完全相同【两表所有字段的值相同】两表所有字段union后，条数与另一张表条数一样两表字段值部分相同【两表部分字段的值相

文章目录数据准备null空值处理空值 ''空值 nullcount与distinctunion与distinctsum与null重复值处理group by、distinct与row_number互换数据准备-- 建表CREATE TABLE IF NOT EXISTS TEST01.A( ID VARCHAR(50) COMMENT 'ID号' -- 01 ,NUMS

目录一致性测试数据量比对金额字段SUM比对主键唯一空值校验枚举值脚本框架建表语句跑后查数一致性测试在做集市迁移时，甲方比较看重数据的一致性测试，一般会要求做新表与旧表的数据量比对，以及部分金额字段的字段级比对。下面给出的参考SQL都可以先在Excel中做好拼接语句，再整合到Python脚本框架中。一般整合之前可以先调试好SQL语句，也就是直接在SQL查询平台sqldbx，先跑一遍SQL，调试完毕再整合为Python脚本。数据量比对/* 表1与表2数据量比对 */insert into 库名.结果

文章目录数据测试一致性脚本写作风格一致性测试步骤补充知识创建临时表常用表达式SQL黑盒测试模板主键唯一null校验null decimal 为0null varchar为空极值 decimal极值 varchar枚举值数据测试做数据测试时，有黑盒测试和白盒测试，其中黑盒测试就是通过查询语句，检查目标表的表结构是否与设计文档一致，主键是否唯一非空，有无异常值，极值是否超出正常范围，枚举值检查数据是否合理分布，对应字段和字段内容是否一致。白盒测试就是检查开发老师的源码，字段信息（字段长度，最大最小值，异常值

文章目录第一坑，没有用管理员身份第二坑，MySQL 服务无法启动第三坑，报错：ERROR 1045 (28000): Access denied for user 'root'@'localhost'第四坑，MySQL8.0后修改密码跟以前不一样电脑配置：系统64位win10，MySQL8.0.16第一坑，没有用管理员身份第一次登录，打开cmd，执行net start mysql报错：发生系统错误5错误原因：没有用管理员身份运行cmd第二坑，MySQL 服务无法启动用管理员身份运行cmd，执行

文章目录Excel造数用到的高频表达式随机生成0与1，显示为“是”与“否”计算日期距离今天有几天生成随机时间输入1显示正常，输入0显示未激活VLOOKUP默认是模糊匹配根据百分比设置等级IF使用场景：将150%，或大于100%的百分数，显示成100%IF使用场景：正数换为0，负数取绝对值求余数，将大数变小多列合并为一列填充空白行多列需要将其上下叠加成一列多行文本合并成一行内容，复制次数，按列排序随机生成数字保留两位小数的随机数大批量填充合并两个单元格字符串Excel造数用到的高频表达式随机生成0与1，显