数据传输一致性保障：如何避免‘少数据’或‘脏数据’？

在做数据同步的时候，ETLCLoud一般通过库表输入与库表输出完成抽取数据和同步数据。

而抽取数据到平台并推送数据到目标端这个过程时，数据都是存在平台所在服务器的内存中的，对于一些大表，内存不足以存储整张表的数据，这时就会使用平台自带的分页传输。

而分页传输，数据被分成多批传输到目标端，如果其中有一批数据输出出错，那么流程会直接终止，事务被回滚，而面对这种情况，我们可以在库表输出中配置

输出异常时跳过异常，并配置节点断言。

这样运行流程，即使有数据出错也不会停止流程，能够成功传输的数据还是正常输出。

这时流程的运行记录会标记为警告（流程正常结束但是存在同步失败的数据）。

检查目标表的确实没有传输失败的数据。