1、SQL LOADER教程SQL*LOADER教程SQL*LOADER是ORACLE的数据加载工具,通常用来将操作系统文件迁移到ORACLE数据库中。SQL*LOADER是大型数据仓库选择使用的加载方法,因为它提供了最快速的途径(DIRECT,PARALLEL)。现在,我们抛开其理论不谈,用实例来使您快速掌握SQL*LOADER的使用方法。首先,我们认识一下SQL*LOADER。在NT下,SQL*LOADER的命令为SQLLDR,在UNIX下一般为sqlldr/sqlload。如执行:d:oraclesqlldrSQL*Loader: Release 8.1.6.0.0 - Production
2、 on 星期二 1月 8 11:06:42 2002(c) Copyright 1999 Oracle Corporation. All rights reserved.用法: SQLLOAD 关键字 = 值 ,keyword=value,.有效的关键字:userid - ORACLE username/passwordcontrol - Control file namelog - Log file namebad - Bad file namedata - Data file namediscard - Discard file namediscardmax - Number of dis
3、cards to allow (全部默认)skip - Number of logical records to skip (默认0)load - Number of logical records to load (全部默认)errors - Number of errors to allow (默认50)rows - Number of rows in conventional path bind array or between direct path data saves(默认: 常规路径 64, 所有直接路径)bindsize - Size of conventional path
4、bind array in bytes(默认65536)silent - Suppress messages during run (header,feedback,errors,discards,partitions)direct - use direct path (默认FALSE)parfile - parameter file: name of file that contains parameter specificationsparallel - do parallel load (默认FALSE)file - File to allocate extents fromskip_u
5、nusable_indexes - disallow/allow unusable indexes or index partitions(默认FALSE)skip_index_maintenance - do not maintain indexes, mark affected indexes as unusable(默认FALSE)commit_discontinued - commit loaded rows when load is discontinued(默认FALSE)readsize - Size of Read buffer (默认1048576)PLEASE NOTE:
6、命令行参数可以由位置或关键字指定。前者的例子是 sqlloadscott/tiger foo;后者的例子是 sqlload control=foouserid=scott/tiger.位置指定参数的时间必须早于但不可迟于由关键字指定的参数。例如,SQLLOAD SCott/tiger control=foo logfile=log, 但不允许 sqlload scott/tiger control=foo log,即使允许参数 log 的位置正确。d:oracle我们可以从中看到一些基本的帮助信息,这里,我用到的是中文的WIN2000ADVSERVER。我们知道,SQL*LOADER只能导入纯
7、文本,所以我们现在开始以实例来讲解其用法。一、已存在数据源result.csv,欲倒入ORACLE中FANCY用户下。result.csv内容:1,默认 Web 站点,192.168.2.254:80:,RUNNING2,other,192.168.2.254:80:,STOPPED3,third,192.168.2.254:81:,RUNNING从中,我们看出4列,分别以逗号分隔,为变长字符串。二、制定控制文件result.ctlresult.ctl内容:load datainfile result.csvinto table resultxt (resultid char terminat
8、ed by ,website char terminated by ,ipport char terminated by ,status char terminated by whitespace)说明:infile指数据源文件这里我们省略了默认的discardfile result.dsc badfile result.badinto table resultxt 默认是INSERT,也可以into table resultxt APPEND为追加方式,或REPLACEterminated by ,指用逗号分隔terminated by whitespace结尾以空白分隔三、此时我们执行加载
9、:D:sqlldr userid=fancy/testpass control=result.ctl log=resulthis.outSQL*Loader: Release 8.1.6.0.0 - Production on 星期二 1月 8 10:25:42 2002(c) Copyright 1999 Oracle Corporation. All rights reserved.SQL*Loader-941: 在描述表RESULTXT时出现错误ORA-04043: 对象 RESULTXT 不存在提示出错,因为数据库没有对应的表。四、在数据库建立表 create table result
10、xt(resultid varchar2(500),website varchar2(500),ipport varchar2(500),status varchar2(500)/五、重新执行加载D:sqlldr userid=fancy/k1i7l6l8 control=result.ctl log=resulthis.outSQL*Loader: Release 8.1.6.0.0 - Production on 星期二 1月 8 10:31:57 2002(c) Copyright 1999 Oracle Corporation. All rights reserved.达到提交点,逻辑
11、记录计数2达到提交点,逻辑记录计数3已经成功!我们可以通过日志文件来分析其过程:resulthis.out内容如下:SQL*Loader: Release 8.1.6.0.0 - Production on 星期二 1月 8 10:31:57 2002(c) Copyright 1999 Oracle Corporation. All rights reserved.控制文件: result.ctl数据文件: result.csv错误文件: result.bad废弃文件: 未作指定: (可废弃所有记录)装载数: ALL跳过数: 0允许的错误: 50绑定数组: 64 行,最大 65536 字节继
12、续: 未作指定所用路径: 常规表RESULTXT已载入从每个逻辑记录插入选项对此表INSERT生效列名 位置 长度 中止 包装数据类型- - - - - -RESULTID FIRST * , CHARACTER WEBSITE NEXT * , CHARACTER IPPORT NEXT * , CHARACTER STATUS NEXT * WHT CHARACTER 表RESULTXT: 3 行载入成功由于数据错误, 0 行没有载入。由于所有 WHEN 子句失败, 0 行没有载入。由于所有字段都为空的, 0 行没有载入。为结合数组分配的空间: 65016字节(63行)除绑定数组外的内存空
13、间分配: 0字节跳过的逻辑记录总数: 0读取的逻辑记录总数: 3拒绝的逻辑记录总数: 0废弃的逻辑记录总数: 0从星期二 1月 08 10:31:57 2002开始运行在星期二 1月 08 10:32:00 2002处运行结束经过时间为: 00: 00: 02.70CPU 时间为: 00: 00: 00.10(可六、并发操作sqlldr userid=/ control=result1.ctl direct=true parallel=truesqlldr userid=/ control=result2.ctl direct=true parallel=truesqlldr userid=/
14、 control=result2.ctl direct=true parallel=true当加载大量数据时(大约超过10GB),最好抑制日志的产生:SQLALTER TABLE RESULTXT nologging;这样不产生REDOLOG,可以提高效率。然后在CONTROL文件中load data上面加一行:unrecoverable 此选项必须要与DIRECT共同应用。在并发操作时,ORACLE声称可以达到每小时处理100GB数据的能力!其实,估计能到110G就算不错了,开始可用结构相同的文件,但只有少量数据,成功后开始加载大量数据,这样可以避免时间的浪费。 sql load的一点小总结 zt sqlldr userid=lgone/tiger control=a.ctl LOAD DATA INFILE t.dat / 要导入的文件 / INFILE tt.date / 导入多个文件 / INFILE * / 要导入的内容就在control文件里 下面的BEGINDATA后面就是导入的内容 INTO TABLE table_name / 指定装入的表 BADFILE c:bad.txt / 指定坏文件地址 * 以下是4种装入表的方式 APPEND / 原先的表有数据 就加在后面 / INSERT / 装载空表 如果原先
copyright@ 2008-2022 冰豆网网站版权所有
经营许可证编号:鄂ICP备2022015515号-1