- 博客(3)
- 收藏
- 关注
RSS订阅原创 行业测试数据
行业测试数据-案例分享 一 总体介绍 “人类正从IT时代走向DT时代” 1.数据测试指的是检查局部数据结构时为了保证临时存储在模块内的数据在程序执行过程中完整、正确的过程。2.工程师开发完成后，常常需要制造大批量的伪数据，来测试数据中台的开发效果。例如在数仓开发中，会遇到需要在已构建的数仓模型（各种表）中，导入一些测试数据，方便逻辑开发完之前进行开发和测试。亦或是自己有一些SQL逻辑需要测试，需要批量造一些假数据（几百上千条，甚至几十万条）。 如何在造数过程中保障数据质量，优化数据产出 数据质量问题：数据
2022-06-16 08:54:09
245
原创 Flink1.12新特性和与Flink1.10语法差异
Flink1.12新特性 SQL Connectors 中的 Metadata 处理 Flink 1.12 中，元数据列是 SQL 标准的扩展，参数中connector和format配置提供的metadata字段。元数据列由METADATA关键字指示。例如，元数据列可用于在 Kafka 记录中读取和写入时间戳，以进行基于时间的操作。连接器和格式文档列出了每个组件的可用元数据字段。但是，在表的架构中声明元数据列是可选的。 //sql CREATE TABLE source( field1 varcha
2022-05-07 15:14:28
951
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人