goldengate ERROR OGG-01161 Bad column index (21)

最新推荐文章于 2025-03-27 10:40:55 发布
最新推荐文章于 2025-03-27 10:40:55 发布
阅读量5.8k 收藏
点赞数
CC 4.0 BY-SA版权
分类专栏： GoldenGate&DSG&SharePlex
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/naguang/article/details/8590330
本文详细解释了GoldenGate中遇到的OGG-01161错误，即表结构不一致导致的问题，并提供了排查和解决方法。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

      goldengate ERROR  OGG-01161 Bad column index (21)

       源端与目标的表结构不一致

处理ogg恢复进程报错ERROR OGG-01161
hsr321的专栏
06-25 2305
大家好，今天网关ogg进程down掉了，造成ogg无法同步，经分析原因是由于主库和备库的其中一个表的表结构不一致，主库的表t_dfs_file_info多了一个字段DOCUMENT_TYPE‍。 解决办法：把主库和备库的表t_dfs_file_info的表结构改为一致： Alter table WGCGGG.T_DFS_FILE_INFO  Add  DOCUMENT_TYPE        
OGG-01161 Bad column index (29) specified for table EPM_SC.D_MEAS_BOX, max columns = 29.
woailyoo0000的博客
03-08 4759
2016-12-17 09:18:57 ERROR OGG-01161 Oracle GoldenGate Delivery for Oracle, rpssyx.prm: Bad column index (29) specified for table EPM_SC.D_MEAS_BOX, max columns = 29. 2016-12-17 09:18:58 ERROR ...
ERROR   OGG-01161  Bad column index (512) specified for table NDB.Q_SUM_G, max columns = 512.
oradbm的博客
09-29 1187
今日ogg复制进程报错信息如下： ERROR OGG-01161 Bad column index (512) specified for table NDB.Q_SUM_G, max columns = 512. SUC_OUT_INTRAENB_2 FLOAT(126) SUC_OUT_INTRAENB_...
OGG-01161
u013165852的博客
08-24 1332
Bad column index (35) specified for table user.table_name, max columns = 35. 原因：源端表结构发生了变更 解决办法：1.如果没有使用数据定义文件，同步表结构就可以 2.如果使用了数据定义文件，目标端使用了sourcedefs参数，需要在源端重新生成def定义文件传送到目标端 ...
OGG故障指南：OGG-01161 Bad column index (xx) specified
qqqyyy0422的博客
03-27 391
ogg故障指南
OGG-01161报错解决方法
09-11
在日常运维中，我们可能会遇到各种错误，其中之一就是OGG-01161错误。这个错误通常表明源数据库的表结构与目标数据库的表结构不匹配，从而导致数据同步过程中出现问题。 当出现OGG-01161错误时，首先要进行的是故障...
goldengate ERROR OGG-01296 Error mapping from
weixin_34253539的博客
04-07 2546
  在处理goldengate数据同步时出现源端与目标端不同步，有可能是表结构，数据以及索引不一样。将源端的表全部导入到目标端后仍发现问题（ERROR   OGG-01296  Error mapping from T.FUT_VP_RANK to T.FUT_VP_RANK.）。最后结果将表过滤再启动复制进程，也可过滤备份的表名再重启进程。问题进程：GGSCI (ogg2) 18> inf...
OGG报错 ：ERROR OGG-00446 ERROR OGG-00508 ERROR OGG-00868
huonan_123的博客
09-06 727
OGG报错 ：ERROR OGG-00446 ERROR OGG-00508 ERROR OGG-00868 报错 2019-09-06T16:29:09.443+0800 ERROR OGG-00868 Oracle GoldenGate Capture for Oracle, e_testb.prm: Gap found in DDL metadata records...
ERROR OGG-02803 Encountered a Data Guard role transition. Alter Extract to SCN
gsforget321的博客
09-06 907
昨天主备切换，物理备库切换主库后，GOLDENGATE的抽取进程起不来，报错如下，查了MOS，备库变成主库后，更新抽取进程的SCN，按照建议更改完，启动没问题，SCN更新后，要删除“TRANLOGOPTIONS USEPREVRESETLOGSID”这个参数后，再重启抽取进程，抽取进程就没问题了： 2024-09-06T00:15:42.759+0800 ERROR OGG-02803 Oracle GoldenGate Capture for Oracle, ext1.prm: Encounte
ERROR   OGG-01161 Bad column index (15) specified for table
weixin_34406061的博客
08-21 564
错误信息:GGSCI (haitaonode01) 02> info allProgram  Status   Group    Lag at Chkpt  Time Since ChkptMANAGER   RUNNING                              REPLICAT   ABENDED    REPWH5     00:00:04     01:01:19 ...
表结构变更后出现的ERROR OGG-01161 Bad column index (88)
weixin_33717298的博客
04-22 300
2014-07-31 09:38:31 ERROR OGG-01668 PROCESS ABENDING. 2014-07-31 09:38:31 ERROR OGG-01161 Bad column index (88) specified for table WIP.WIP_PARAMETERS, max columns = 88. 网上有说是表结构不一致的。可是我已经细致比对...
GGS ERROR 160 Bad column index
cndoc40428的专栏
08-14 343
最近由于一个数据库正在升级“改造”，部分表结构做了一些调整，以致GoldenGate进程出现了ABENDED状态，下面分享一个因GoldenGate源端表结构发生变化后，引起GoldenGate目标端Replicat进程ABEN...
GoldenGate【OGG-01161】OGG-01161 Replicat Abends With Incompatible Record Error
weixin_34056162的博客
12-29 243
APPLIES TO: Oracle GoldenGate - Version 10.4.0.78 and later Information in this document applies to any platform.SYMPTOMS: 1. When using SAMFS file system replicat may ...
【OGG-01161】源端表结构发生变化导致replicat进程abend
热门推荐
Sharon--start focusing on Oracle
05-21 1万+
错误日志如下： 2014-05-21 09:31:34  ERROR   OGG-01161 Oracle GoldenGate Delivery for Oracle, r54gh1.prm:  Bad column index (35) specified for tableGH.APP_INFO, max columns = 35. 2014-05-21 09:31:34  ERRO
OGG-01161 源和目标端的表结构不一致导致应用进程abended
bing_yuan的博客
02-27 899
MySQL同步到Oracle出现OGG-01161 源端和目标端表结构不一致导致应用进程ABENDED。
OGG源与目标表结果不一致，报OGG-01161错误
weixin_41561946的博客
01-13 2135
系统环境 oracle11.2.0.4+OGG12.2.0.1.0 错误信息 ERROR OGG-01161 Bad column index (73) specified for table SC.T_SB_CZZ, max columns = 73. 详细错误信息 2021-01-09 02:26:28 INFO OGG-02759 The definition for table SC.T_SB_CZZ is obtained from the target database. 20
ogg mysql表结构发生变化_【OGG-01161】源端表结构发生变化导致replicat进程abend
weixin_34712106的博客
01-19 497
错误日志如下：2014-05-21 09:31:34 ERROR OGG-01161Oracle GoldenGate Delivery for Oracle, rephh1.prm: Bad column index (35) specified for tableHH.INFO, max columns = 35.2014-05-21 09:31:34 ERROROGG-016...
OGG-01161的解决
weixin_34023982的博客
12-06 723
问题描述： 我的goldengate是从oracle同步到mysql，报错如下： ERROR OGG-01161 Oracle GoldenGate Delivery for MySQL, repacc.prm: Bad column index (20) specified for tabl e xxx.T_xxx, max columns ...
Illegal data source value -only
最新发布
08-01
<think>我们正在处理一个关于"Illegal data source value error fix"的问题。根据用户提供的引用信息，特别是引用[1]中的错误描述，我们可以推断用户可能遇到了OGG-01307错误，该错误与列转换失败有关，可能是源数据损坏或为不匹配的数据类型指定了分钟值。 引用[1]的具体描述： OGG-01307: Column function diagnostic message: DAT_{0} Bad value for minute {1,number,0} 原因：列转换失败。源数据库或trail文件中的分钟数据可能已损坏，或者为非分钟数据指定了分钟值。 因此，我们需要针对这个错误提供解决方案。 步骤： 1. 确认错误发生的上下文：这个错误通常发生在Oracle GoldenGate（OGG）进行数据复制时，当尝试转换时间类型数据（特别是分钟部分）时，源数据中包含了一个无效的值。 2. 分析可能的原因： a) 源数据确实损坏：例如，分钟字段包含了超出0-59范围的值（如负数或大于59）。 b) 数据类型不匹配：目标列定义为时间类型，但源数据实际上不是时间类型，或者源数据是字符串但格式不正确。 c) 映射错误：在OGG的映射配置中，可能错误地将一个非时间类型的列当作时间类型处理，特别是使用了时间相关的列函数（如DAT函数）时。 3. 解决方案： a) 检查源数据：确认源表中对应列的数据是否合法。可以查询源表，检查该列的值是否在分钟的有效范围内（0-59）以及是否为整数。 b) 检查OGG的抽取和复制进程配置：查看映射部分（MAP语句）是否使用了列转换函数（如DAT函数），并确认该函数是否适用于该列。 c) 修改映射：如果源列不是时间类型，则不应该使用时间相关的函数。或者，如果源列是字符串但表示时间，可能需要先使用转换函数将其转换为时间类型，然后再提取分钟。 d) 数据清洗：如果源数据确实存在损坏，需要在源端进行数据清洗，修复无效的分钟值。 e) 使用异常处理：在OGG中，可以使用EXCEPTION或REPERROR等参数来跳过错误记录，但这只是临时措施，长期仍需修复数据。 4. 具体操作示例（假设错误发生在复制进程的映射中）： 假设原来的映射语句为： MAP SCHEMA.TABLE, TARGET SCHEMA.TABLE, COLMAP (target_col = DAT("MINUTE", source_col)); 如果source_col不是时间类型，那么使用DAT函数提取分钟就会出错。我们可以改为： - 如果source_col是字符串，且格式为'YYYY-MM-DD HH24:MI:SS'，则可以使用TO_DATE函数先转换，再提取分钟： target_col = DAT("MINUTE", @DATE("YYYY-MM-DD HH24:MI:SS", "YYYY-MM-DD HH24:MI:SS", source_col)) - 或者，如果源列不是时间类型，但我们需要提取分钟，那么应该先确保该列是时间类型。如果无法保证，则需要在源端修改数据或改变映射逻辑。 5. 如果错误是由于数据损坏（比如分钟值超出范围），则需要修复源数据。例如，在源数据库执行： UPDATE table_name SET minute_column = NULL WHERE minute_column NOT BETWEEN 0 AND 59; 然后重新启动OGG进程。 6. 如果问题仍然存在，可以尝试在OGG中增加日志记录，以便更详细地追踪出错的具体行和值。可以通过在映射中添加错误记录到异常表的方式，或者使用OGG的日志参数。 根据引用[2]，虽然是一个关于C语言文件末尾换行的警告，但其中体现的严谨态度也适用于这里：我们应该确保数据格式的严格性。 因此，我们的回答将围绕上述步骤展开。 注意：由于用户的问题是关于OGG的错误，我们主要参考引用[1]的内容。 生成相关问题： 1. 如何查询源数据库中的无效分钟值？ 2. 在OGG中如何配置列映射以避免数据类型错误？ 3. 如何设置OGG的异常处理以跳过错误记录并继续复制？</think>### Illegal Data Source Value Error Fix #### 问题分析 "Illegal data source value"错误通常发生在以下场景： 1. **数据类型不匹配**：源数据值超出目标列允许范围（如时间字段分钟值>59）[^1] 2. **数据损坏**：源数据库或传输文件(trail file)中的数据异常[^1] 3. **格式错误**：非结构化数据被当作结构化数据处理 4. **字符集冲突**：源数据和目标系统字符集不兼容 #### 解决方案 1. **验证源数据** ```sql -- 检查异常值（示例：时间字段） SELECT MINUTE_COLUMN FROM source_table WHERE MINUTE_COLUMN < 0 OR MINUTE_COLUMN > 59; ``` 修复无效记录： ```sql UPDATE source_table SET MINUTE_COLUMN = NULL WHERE MINUTE_COLUMN NOT BETWEEN 0 AND 59; ``` 2. **配置数据转换规则** 在ETL工具（如Oracle GoldenGate）中添加转换函数： ```plaintext COLUMN target_column = @IF(@VAL(SOURCE_COL) > 59, NULL, @VAL(SOURCE_COL)) ``` 3. **字符集处理** - 确认源数据库字符集：`SELECT * FROM nls_database_parameters` - 在OGG配置中添加： ```plaintext GGSCI> ADD EXTTRAIL ... FORMAT ASCII ``` 4. **异常处理增强** 在复制进程配置中添加容错： ```plaintext REPERROR DEFAULT, ABEND REPERROR DEFAULT, DISCARD ``` 5. **文件格式验证** - 检查文件结尾符（参考文件警告[^2]） - 使用`hexdump`验证二进制文件完整性： ```bash hexdump -C trail_file | tail -n 20 ``` #### 预防措施 1. 在源系统实施数据校验约束 ```sql ALTER TABLE source_table ADD CONSTRAINT chk_minute CHECK (minute_col BETWEEN 0 AND 59); ``` 2. 定期运行数据质量检查脚本 3. 使用OGG的`COLMATCH`参数强制列映射 4. 启用详细日志定位错误： ```plaintext GGSCI> EDIT PARAMS REP1 REPORTCOUNT EVERY 1000 RECORDS ``` > **关键提示**：当处理时间数据时，始终验证$ t \in [0,59] $ 的分钟值范围，这是最常见错误来源[^1]。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值