Invalid operation: Load into table ‘sources_orderdata‘ failed. Check ‘stl_load_errors‘ system table

原创已于 2022-07-01 17:01:49 修改 · 540 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#云计算 #大数据

于 2022-07-01 16:59:06 首次发布

本文介绍了在使用 AWS Redshift 进行数据加载时遇到的一个常见错误：AmazonInvalidoperation，并详细解释了解决步骤，包括查询错误信息及如何通过调整 COPY 命令中的 TRUNCATECOLUMNS 参数来避免数据长度问题。

aws今天跑copy任务时报错如下：
[XX000][500310] Amazon Invalid operation: Load into table ‘sources_orderdata’ failed. Check ‘stl_load_errors’ system table for details.;
这是啥？为啥不直接告诉我原因，这就是aws_redshift奇妙之处，他的信息要你自己去找。
解决：
1.查询错误信息

SELECT * FROM STL_LOAD_ERRORS where filename like '%你自己s3的文件路径%'  order by starttime desc ;

在这里插入图片描述
2.参照问题表得到具体原因
我报错原因是加载数据过长，后面我在我的copy命令中加了TRUNCATECOLUMNS 避免出现长度问题，将列中的数据截断为合适的字符数以符合列规范。仅适用于具有 VARCHAR 或 CHAR 数据类型的列以及大小为 4 MB 或以下的行
在这里插入图片描述
这是官网地址：
https://docs.aws.amazon.com/zh_cn/redshift/latest/dg/r_Load_Error_Reference.html