当我在使用Datax工具传输数据的时候,因为数据需要严格保证完整性,所以当Datax但凡出现一条数据传输不成功,必须就及时停止运行,排查问题之后再传。
Datax也是支持这种情况的,配置如下
{
"job": {
"setting": {
"speed": {
"channel": 1
},
"errorLimit": {
"record": 0
}
}
}
}
本文讲述了在使用Datax工具进行数据传输时,由于对数据完整性的高要求,一旦遇到数据传输失败,Datax如何设置配置以确保停止运行并排查问题。配置中提到的errorLimit参数用于控制记录级别的错误处理。
3万+

被折叠的 条评论
为什么被折叠?



