yigenfake的博客

¨问题陈述：在产险综合业务系统中存在保单信息不一致的问题。¨问题分解：保单表中的一些保单在保费信息表中没有。¨问题举例：保单表中有保单000123123123123123，000456456456456, 而Charge表中没有。¨问题数量：保单表中现有北京分公司1000张保单，有291张在保费信息表中没有，占比0.21%。¨问题影响：造成基础层保单及相关的业务数据均不入库。...

ETL流程：可以把ETL分为五个阶段，按照开发的顺序分：1)准备阶段：根据需求定义映射关系，产出物为《ETL映射文档》。分析数据源质量，针对数据源中有问题的数据制定数据抽取原则，产出物为《数据源质量分析报告》、《问题数据处理规范》。确定数据抽取的技术架构，产出物为《全量数据抽取策略》、《增量数据抽取策...