sqlldr默认字符串最大长度修改和ctl文件的格式

最新推荐文章于 2021-09-02 15:01:42 发布
原创 最新推荐文章于 2021-09-02 15:01:42 发布 · 1.3w 阅读 · 8 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

sqlldr默认字符串最大长度

1、sqlldr入库对字段长度进行的限制，默认是255。如果超出了255应该怎么办呢？

很简单：直接在列名后面修改默认长度，如：地址字段长度300

address char(300)

 

2、sqlldr入clob字段也可以采用修改默认长度的方法如：article char(20000)

 

Ctl文件（TRUNCATE）直接覆盖原表插入

OPTIONS (SILENT=(ALL),DIRECT=TRUE)

UNRECOVERABLE

LOAD DATA INFILE 'D:/area_data_temp/BSC/bsc.csv'

TRUNCATE INTO TABLE TB_BSC_INFO

FIELDS TERMINATED BY '`'

TRAILING NULLCOLS

(BSC_NAME,PROVINCE,CITY,SGSN char(1024),MACHINE_ROOM,IP,COVER_RANGE,PRODUCT_FACTORY,LIFE_STATE,CRT_TIME "sysdate",BSC_ID SEQUENCE(MAX,1))

 

Ctl文件（APPEND）在原表的基础上追加

OPTIONS (SILENT=(ALL),DIRECT=TRUE,PARALLEL=TRUE,SKIP_INDEX_MAINTENANCE=TRUE)

UNRECOVERABLE

LOAD DATA INFILE 'D:/area_data_temp/CELL/cell.csv'

APPEND INTO TABLE TB_CELL_INFO

FIELDS TERMINATED BY '`'

TRAILING NULLCOLS

(CELL_NAME,LAC,CI,LIFE_STATE,CRT_TIME "sysdate",CELL_ID SEQUENCE(MAX,1))

SQLLDR——CTL文件：字段设置
weixin_34355559的博客
12-21 5938
position 关键字用来指定列的开始和结束位置 　 position(m:n)：指从第 m 个字符开始截止到第 n 个字符作为列值 　 position(*+2:15)：直接指定数值的方式叫做绝对偏移量，如果使用*号，则为相对偏移量，表示上一个字段哪里结束，这次就哪里开始，相对便宜量也可以再做运算。 　 position(*) char(9)：这种...
sqlder ctl控制文件 参数及模板
君不见皇的博客
04-24 3036
CTL 文件参数介绍 前面部分 1、LOAD DATA：通常以此为开头，其前可加如下参数： 2、UNRECOVERABLE：表示数据不可恢复 3、RECOVERABLE：表示数据可恢复 4、CONTINUE_LOAD：表示继续添加 主体部分 INFILE：表示数据文件位置，如果值为*，表示数据就在控制文件中，本例中没有单独的数据文件，对于大多数加载而言，都会将数据文件与控制文件分离 INTO TA...
oracle默认字符长度,oracle - SQLLDR默认字符长度及其修复方法 - 堆栈内存溢出
weixin_34379040的博客
04-05 472
我认为它们与内部缓冲区大小相同。 经过足够的处理后，我创建了一个真实的粗略工具脚本，该脚本生成了使用列的实际大小的框架控制文件。 它为我提供了90％的解决方案，并且没有色谱柱尺寸问题。 最好在内存上使用，因为如果列较小，则不使用全部255个字符。 如果需要，请尝试一下。 无论如何，它可能会给您一些想法。/******************************************...
sqlldr默认字符串最大长度 导致入库不正常
mouseshuai的专栏
02-09 4754
问题描述：用c++代码调用sqlldr入库大数据量的数据文件，有个字段是298的文本，数据库中的对应字段是varchar2（330），足够长了吧。然后入库，发现有好多长字段没有入库成功，而看sqlldr的执行日志发现是该字段过长，没有入库成功。是不是自己的数据库字段长度写错了？回去检查一把！发现并没有错误啊。原因：在google上查询一把，发现sqlldr有个字符串的默认长度设置是255，
sql loader的一点总结
cuixie2370的博客
03-16 331
主要討論control file 格式 . sqlldr userid=lgone/tiger control=a.ctl LOAD DATA INFILE 't.dat' // 要导入的文件 // INFILE 'tt.d...
sqlldr
weixin_34268579的博客
11-07 443
1、字符集 sqlldr可以指定读取的文件的字符集，如果数据库为gbk，读取的文件为utf-8，这个时候就需要指定字符集 load data CHARACTERSET 'UTF8' 2、sqlldr导入字段超长 sqlldr有个字符串的默认长度设置是255，如果超过了255，sqlldr默认超长，不管你的表里面是怎么设置的。 如果导入大于255的，需要设置字段长度。 ...
sqlldr例子
05-26
其中，`user/password`是数据库连接的用户名和密码，`database`是连接的服务名或连接字符串，`control_file.ctl`是控制文件路径，`log_file.log`是日志文件路径。 5. **数据转换和校验** SQL*Loader允许在控制...
帮我写个完整的shell脚本，实现在Oracle中根据表结构导出ctl文件
04-12
3. 处理不同数据类型到SQL*Loader数据类型的映射，例如DATE类型可能需要指定格式，字符串类型需要CHAR长度等。 4. 确保生成的ctl文件语法正确，包括必要的OPTIONS、INFILE、INTO TABLE等部分。 考虑到用户提供的...
sqlldr加载19c pdb最佳实践
fanzhuozhuo的博客
09-02 3216
oracle下载的软件包或者补丁文件校验背景sqlldr--数据文件sqlldr--控制文件PSU补丁校验命令 背景 sqlldr历史悠久，从oracle 7开始提供数据加载得功能。那么在高本版，甚至19c上面sqlldr还能否使用哪？ 某客户就有这种需求，经常需要把excel里面的数据导入到数据库表里面，那么sqlldr就成为不二之选。下面看下具体的使用和注意事项。 sqlldr–数据文件 一般会导出一个excel文件，或者csv文件，类似如下： 其中的内容如下： 为了后面的控制文件好些，一般插入个分
Oracle数据装载，定义字段长度
最新发布
10-15
在控制文件（`.ctl`）的字段列表中，为需指定长度的字段添加 `CHAR(N)`，其中 `N` 为最大允许字节数。 ```sql LOAD DATA INFILE 'data.txt' INTO TABLE your_table FIELDS TERMINATED BY ',' TRAILING NULLCOLS ( ...
sqlldr报超出字符长度错误
02-11
sqlldr报超出字符长度错误,可以参考的好资料。
SQLLDR—CTL文件
热门推荐
weixin_33711641的博客
12-12 1万+
SQLLDR 可以把一些以文本格式存放的数据顺利的导入到oracle数据库中，是一种在不同数据库之间进行数据迁移的非常方便而且通用的工具。缺点就速度比较慢，另外对blob等类型的数据不方便。 CTL 文件介绍 第一部分 1、LOAD DATA：通常以此为开头，其前可加如下参数： 2、UNRECOVERABLE：表示数据不可恢复 3、RECOVERABL...
关于Oracle用sqlldr导入限制值长度大于255问题解决方法
weixin_30814329的博客
03-09 1822
今天用OraLoad.exe数据导入发现一个备注数据无法导入，提示“被拒绝 - 表 RCS_SPECIALIZE_SUBSIDY 的列 SUBS_MEMO 出现错误。数据文件的字段超出最大长度”，但我的SUBS_MEMO字段已经是2048了，而实现数据并没有达到2048，开始以为是备注信息中有非法字符，折腾来折腾去无意中发现当我的数据达到255时就可以导入成功，若超出则无法导入。 ...
sqlldr导入clob字段显示长度不够
殇~的博客
02-20 2711
1.错误描述 当使用sqlldr加载很长的字符串(超过4000)到表中的clob类型中时,老是报错:数据文件的字段超出最大长度 2.原因分析 sqlldr每次读入文件中数据流的数据类型默认为CHAR ,长度为 255 .所以只要超过255字符的段都会报这个错 3.解决方式 在控制文件中字段后添加上char(1000000),例如: LOAD DATA INFILE * INTO ...
sqlldr 执行脚本文件字段太长
weixin_42900944的博客
11-28 2693
sqlldr执行脚本文件定义字段超长 对于小白的我，今天确实领悟了一个很大的知识，之前一直没有遇到过这种情况，执行完脚本，也没有错误信息，就只是提示50762 Rows not loaded due to data errors. 然后数据各种对比，各种修改，一条数据一条执行还是一样的错误，也还以为是时间格式错误，各种修改，还是宝一样的错误，就是数据加载错误，导致惹怒了公司大哥，这回一定记住了，后...
sqlldr错误:field in data file exceeds maximum length
文学超的博客
10-22 4191
SQL*LOADER是ORACLE的数据加载工具，通常用来将操作系统文件（数据）迁移到ORACLE数据库中。SQL*LOADER是大型数据仓库选择使用的加载方法，因为它提供了最快速的途径（DIRECT，PARALLEL）。 在使用sqlldr的过程中，出现如下报错信息 Record 1: Rejected - Error on table wenxuechao, column name.Fie...
用分析函数实现自动生成sqlloader定长数据装载控制文件的一个语句
nisjlvhudy的专栏
02-05 1731
本文中的内容在《2010-05-07 22:08 Automatic SQL*LOADER(以定长方式为例) ，原文地址：http://hi.baidu.com/nsj820/item/b346e517416d43011994ec5c》也能实现，但这里主要想体现的是oracle分析函数的强大。 WITH FIX_LENGTH AS (SELECT A.TABLE_NAME,
SQLLDR错误Field in data file exceeds maximum length
逍遥子
03-29 3912
创建表 create table objects( owner varchar2(30), object_name varchar2(50), object_id number, status varchar2(10), created date); 控制文件 LOAD DATA INFILE ldr_object.csv TRUNCATE INTO TABLE OBJECTS
SQLLDR-CTL文件导入oracle：字段控制（截取）
qq_42217505的博客
07-13 7455
position 关键字用来指定列的开始和结束位置 　 position(m:n)：指从第 m 个字符开始截止到第 n 个字符作为列值 　 position(+2:15)：直接指定数值的方式叫做绝对偏移量，如果使用号，则为相对偏移量，表示上一个字段哪里结束，这次就哪里开始，相对便宜量也可以再做运算。 　 position(*) char(9)：这种相对偏移量+类型和长度的优势在于，你只需要为第一列指定开始位置，其他列只需要指定列长度就可以。 FILLER：控制文件中指定 FILLER，表示该列值不导入表中。
sqlldr传参至ctl文件如何编写
08-01
<think>我们被要求回答如何在SQL*Loader中将参数传递到CTL控制文件中并使用。根据引用内容，SQL*Loader是Oracle用于导入数据的工具，控制文件（ctl文件）定义了数据加载的规则。用户希望了解如何传递参数给控制文件并在其中使用这些参数。 在SQL*Loader中，我们可以通过命令行参数来传递值给控制文件，然后在控制文件中使用这些参数。具体步骤如下： 1. 在控制文件中，使用参数占位符（如:PARAMETER_NAME）来代表将要传入的参数。 2. 在运行sqlldr命令时，使用`PARFILE`选项指定一个参数文件，或者直接在命令行中使用`PARAMETERS`子句来定义这些参数的值。 例如，假设我们有一个控制文件`loader.ctl`，我们希望在控制文件的INFILE子句中使用一个参数来指定要加载的数据文件路径。我们可以这样写控制文件： ```sql LOAD DATA INFILE &INPUT_FILE INTO TABLE emp FIELDS TERMINATED BY "," OPTIONALLY ENCLOSED BY '"' ( empno, empname, sal, deptno ) ``` 注意：在控制文件中，我们使用`&INPUT_FILE`作为参数占位符。 然后，在运行sqlldr时，我们可以通过命令行传递参数： ```bash sqlldr scott/tiger control=loader.ctl PARAMETERS="INPUT_FILE='c:\data\mydata.csv'" ``` 或者，如果参数较多，可以创建一个参数文件（例如`params.par`），内容如下： ``` INPUT_FILE='c:\data\mydata.csv' ``` 然后使用： ```bash sqlldr scott/tiger control=loader.ctl PARFILE=params.par ``` 这样，在控制文件中`&INPUT_FILE`就会被替换为`'c:\data\mydata.csv'`。 需要注意的是： - 参数名在控制文件中使用时，前面要加上`&`，而在定义参数值时直接使用参数名（不加`&`）。 - 在命令行中传递参数时，使用`PARAMETERS`选项，后面跟一个字符串，其中包含一个或多个参数赋值，多个参数之间用逗号分隔。 - 参数文件中，每行一个参数赋值。 另外，我们也可以在控制文件中使用默认值，例如： ```sql INFILE &INPUT_FILE DEFAULT 'default.csv' ``` 这样，如果没有传递INPUT_FILE参数，则使用'default.csv'。 但是，请注意，在SQL*Loader中，参数替换是在控制文件被读取时进行的，因此参数占位符可以出现在控制文件的任何位置（除了关键字和保留字的位置）。 下面是一个更复杂的例子，传递多个参数： 控制文件`loader2.ctl`: ```sql LOAD DATA INFILE &DATA_FILE BADFILE &BAD_FILE DISCARDFILE &DISCARD_FILE APPEND INTO TABLE &TABLE_NAME FIELDS TERMINATED BY &TERMINATOR ( empno, empname, sal, deptno ) ``` 命令行： ```bash sqlldr scott/tiger control=loader2.ctl PARAMETERS="DATA_FILE='data.csv', BAD_FILE='bad.bad', DISCARD_FILE='discard.dsc', TABLE_NAME=employees, TERMINATOR=','" ``` 或者使用参数文件（`params2.par`）： ```bash DATA_FILE='data.csv' BAD_FILE='bad.bad' DISCARD_FILE='discard.dsc' TABLE_NAME=employees TERMINATOR=',' ``` 然后运行： ```bash sqlldr scott/tiger control=loader2.ctl PARFILE=params2.par ``` 这样，控制文件中的参数就会被实际的值替换。 需要注意的是，参数替换是简单的文本替换，因此要确保替换后的控制文件语法正确。例如，字符串类型的值应该用引号括起来（如`'data.csv'`），而像字段分隔符这样的单个字符，如果直接使用逗号，则不需要引号，但在控制文件中我们写成`&TERMINATOR`，那么替换后就是`,`，但这样会出错，因为控制文件要求字符串要用引号。因此，我们应该在控制文件中这样写： ```sql FIELDS TERMINATED BY '&TERMINATOR' ``` 然后在参数中传递TERMINATOR时，不要加引号，因为控制文件已经加了引号，所以参数值只需要传递一个逗号即可，例如： ```bash TERMINATOR=, ``` 这样替换后就是`FIELDS TERMINATED BY ','`，这是正确的。 或者，我们也可以这样传递： ```bash TERMINATOR="','" ``` 但这样替换后就是`FIELDS TERMINATED BY ''','''`，这显然不对。 因此，更推荐的方式是在控制文件中将参数放在引号内，然后传递参数时只传递分隔符本身（不加引号），如上所述。 总结：在SQL*Loader控制文件中使用参数，可以增加控制文件的灵活性，通过命令行或参数文件传递参数值，实现动态加载。 注意：在实际使用中，要确保参数值中不包含特殊字符，以免破坏控制文件的结构。如果参数值包含特殊字符（如空格、引号等），需要适当处理（如用引号将整个参数值括起来，并注意转义）。 根据引用[2]中提到的参考文档，我们可以进一步查阅官方文档获取更多细节。 以上就是在SQL*Loader中传递参数到控制文件的方法。</think>### 如何在 SQL*Loader 中传递参数到控制文件（CTL） 在 SQL*Loader 中，可以通过 **命令行参数** 或 **参数文件（PARFILE）** 将动态值传递到控制文件（CTL），使用 `&` 符号作为占位符。以下是具体实现方法： --- #### 方法 1：通过命令行直接传递参数 **语法**： ```bash sqlldr USERID=用户名/密码 CONTROL=控制文件名.ctl PARAMETERS="参数1=值1, 参数2=值2" ``` **示例**： 1. **控制文件 (`load_data.ctl`)** 使用 `&` 定义参数占位符： ```sql LOAD DATA INFILE &INPUT_FILE -- 动态文件路径 INTO TABLE &TABLE_NAME -- 动态表名 FIELDS TERMINATED BY ',' OPTIONALLY ENCLOSED BY '"' (id, name, salary) ``` 2. **运行命令** 传递实际参数值： ```bash sqlldr scott/tiger@orcl CONTROL=load_data.ctl \ PARAMETERS="INPUT_FILE='data.csv', TABLE_NAME='employees'" ``` --- #### 方法 2：通过参数文件（PARFILE）传递 适用于参数较多或需要复用的情况。 1. **创建参数文件 (`params.par`)** ```bash INPUT_FILE='data.csv' TABLE_NAME='employees' DATE_FORMAT='YYYY-MM-DD' ``` 2. **运行命令** 通过 `PARFILE` 指定参数文件： ```bash sqlldr scott/tiger@orcl CONTROL=load_data.ctl PARFILE=params.par ``` --- #### 关键细节说明 1. **占位符语法** 在 CTL 文件中用 `&参数名` 声明占位符（如 `&INPUT_FILE`）。 SQL*Loader 执行时会自动替换为实际值。 2. **参数值格式** - 字符串需用单引号包裹（如 `'data.csv'`）。 - 数值或关键字（如 `APPEND`）无需引号。 3. **默认值设置** 可在 CTL 中为参数指定默认值： ```sql INFILE &INPUT_FILE DEFAULT 'default.csv' -- 未传参时使用默认值 ``` 4. **特殊字符处理** 若参数值含逗号或引号，需用转义符： ```bash PARAMETERS="FIELD_TERM='||', ENCLOSE_CHAR='\"'" ``` --- #### 实际应用场景 - **动态文件路径**：批量加载不同来源的数据文件。 - **多表加载**：通过参数切换目标表名。 - **条件加载**：根据参数值决定 `WHEN` 子句条件。 示例： ```sql INTO TABLE employees WHEN (deptno = &DEPT_NO) -- 动态过滤部门编号 ``` > **注意**：参数传递需严格遵循语法，避免因格式错误导致加载失败。建议先在测试环境验证[^1][^2]。 --- ### 相关问题 1. SQL*Loader 如何处理包含特殊字符（如引号、逗号）的数据文件？ 2. 如何通过 SQL*Loader 实现数据加载时的错误记录和重试机制？ 3. SQL*Loader 与 Oracle 外部表（External Table）在数据加载效率上有何差异？
评论 2
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

时间辜负了谁

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值