1. IT分享知识网首页
  2. 未分类

sqlldr的用法 (这个最完整)

老牧童 • • 未分类

sqlldr的用法 (这个最完整)转自 http blog chinaunix net uid 23622436 id 2394093 html 在 Oracle 数据库中 我们通常在不同数据库的表间记录进行复制或迁移时会用以

大家好，欢迎来到IT知识分享网。

转自:http://blog.chinaunix.net/uid-23622436-id-2394093.html

  1. alter table B nologging;  
  2. insert /* +APPEND */ into B(c1,c2) values(x,xx);  
  3. insert /* +APPEND */ into B select * from A@dblink where …..;  


好 啦，前面简述了 Oracle 中数据导入导出的各种方法，我想一定还有更高明的。下面重点讲讲 Oracle  的 Sql Loader (sqlldr) 的用法。

在命令行下执行 Oracle  的 sqlldr 命令，可以看到它的详细参数说明，要着重关注以下几个参数：

userid  — Oracle 的 username/password[@servicename]
control  — 控制文件，可能包含表的数据
——————————————————————————————————-
log — 记录导入时的日志文件，默认为 控制文件(去除扩展名).log
bad — 坏数据文件，默认为 控制文件(去除扩展名).bad
data — 数据文件，一般在控制文件中指定。用参数控制文件中不指定数据文件更适于自动操作
errors — 允许的错误记录数，可以用他来控制一条记录都不能错
rows — 多少条记录提交一次，默认为 64
skip — 跳过的行数，比如导出的数据文件前面几行是表头或其他描述

还有更多的 sqlldr 的参数说明请参考： sql loader的用法 。

用例子来演示 sqlldr 的使用，有两种使用方法：

1. 只使用一个控制文件，在这个控制文件中包含数据
2. 使用一个控制文件(作为模板) 和一个数据文件

一般为了利于模板和数据的 分离，以及程序的不同分工会使用第二种方式，所以先来看这种用法。数据文件可以是 CSV 文件或者以其他分割符分隔的，数据文件可以用 PL/SQL Developer 或者 Toad 导出，也可以 用 SQL *Plus 的  spool 格式化产出，或是 UTL_FILE 包生成 。另外，用 Toad 还能直接生成包含数据的控制文件。

首先，假定有这么一个表 users，并插入五条记录：

  1. create table users(  
  2.     user_id number,           –用户 ID  
  3.     user_name varchar2(50),   –用户名  
  4.     login_times number,       –登陆次数  
  5.     last_login date           –最后登录日期  
  6. )  


  1. insert into users values(1,’Unmi’,3,sysdate);  
  2. insert into users values(2,NULL,5,to_date(‘2008-10-15′,’YYYY-MM-DD’));  
  3. insert into users values(3,’隔叶黄莺 ‘,8,to_date(‘2009-01-02′,’YYYY-MM-DD’));  
  4. insert into users values(4,’Kypfos’,NULL,NULL);  
  5. insert into users values(5,’不知秋 ‘,1,to_date(‘2008-12-23′,’YYYY-MM-DD’));  


第 二种方式： 使用一个控制文件(作为模板) 和一个数据文件

1) 建立数据文件，我们这里用 PL/SQL Developer 导出表 users 的记录为 users_data.csv 文件，内容如下：

  1. ”   “,“USER_ID”,“USER_NAME”,“LOGIN_TIMES”,“LAST_LOGIN”  
  2. “1”,“1”,“Unmi”,“3”,“2009-1-5 20:34:44”  
  3. “2”,“2”,“”,“5”,“2008-10-15”  
  4. “3”,“3”,“隔叶黄莺”,“8”,“2009-1-2”  
  5. “4”,“4”,“Kypfos”,“”,“”  
  6. “5”,“5”,“不知秋”,“1”,“2008-12-23”  


2) 建立一个控制文件 users.ctl，内容如下：

  1. OPTIONS (skip=1,rows=128) — sqlldr 命令显示的 选项可以写到这里边来,skip=1 用来跳过数据中的第一行  
  2. LOAD DATA  
  3. INFILE “users_data.csv” –指定外部数据文件，可以写多 个 INFILE “another_data_file.csv” 指定多个数据文件  
  4. –这里还可以使 用 BADFILE、DISCARDFILE 来指定坏数据和丢弃数据的文件，  
  5. truncate –操作类型，用 truncate table 来清除表中原有 记录  
  6. INTO TABLE users — 要插入记录的表  
  7. Fields terminated by “,” — 数据中每行记录用 “,” 分隔  
  8. Optionally enclosed by ‘“‘ — 数据中每个字段用 ‘”‘ 框起，比如字段中有 “,” 分隔符时  
  9. trailing nullcols –表的字段没有对应的值时允 许为空  
  10. (  
  11.   virtual_column FILLER, –这是一个虚拟字段，用来跳 过由 PL/SQL Developer 生成的第一列序号  
  12.   user_id number, –字段可以指定类型，否则认 为是 CHARACTER 类型, log 文件中有显示  
  13.   user_name,  
  14.   login_times,  
  15.   last_login DATE “YYYY-MM-DD HH24:MI:SS” — 指定接受日期的格式，相当用 to_date() 函数转换  
  16. )  


说 明：在操作类型 truncate 位置可用以下中的一值：

1) insert     –为缺省方式，在数据装载开始时要求表为空
2) append  –在表中追加新记录
3) replace  –删除旧记录(用 delete from table 语句)，替换成新装载的记录
4) truncate –删除旧记录(用 truncate table 语句)，替换成新装载的记录

3) 执行命令：

sqlldr  dbuser/dbpass@dbservice  control=users.ctl

在 dbservice 指示的数据库的表 users 中记录就和数据文件中的一样了。

执行完 sqlldr 后希望能留意一下生成的几个文件，如 users.log 日志文件、users.bad 坏数据文件等。特别是要看看日志文件，从中可让你更好的理解 Sql Loader，里面有对控制文件的解析、列出每个字段的类型、加载记录的统计、出错原因等信息。

第一种方式，只使用一个控制文件 在这个控制文件中包含数据

1) 把 users_data.cvs 中的内容补到 users.ctl 中，并以 BEGINDATA 连接，还要把 INFILE “users_data.csv” 改为 INFILE *。同时为了更大化的说明问题，把数据处理了一下。此时，完整的 users.ctl 文件内容是：

  1. OPTIONS (skip=1,rows=128) — sqlldr 命令显示的 选项可以写到这里边来,skip=1 用来跳过数据中的第一行  
  2. LOAD DATA  
  3. INFILE *  — 因为数据同控制文件在一 起，所以用 * 表示  
  4. append    — 这里用 了 append 来操作，在表 users 中附加记录   
  5. INTO TABLE users  
  6. when LOGIN_TIMES<>’8′  — 还可以用 when 子 句选择导入符合条件的记录  
  7. Fields terminated by “,”  
  8. trailing nullcols  
  9. (  
  10.   virtual_column FILLER, –跳过 由 PL/SQL Developer 生成的第一列序号  
  11.   user_id “user_seq.nextval”, –这一列直接取序列的下一值，而不用数据中提供的值  
  12.   user_name “‘Hi ‘||upper(:user_name)”,–,还能用SQL函数或运算对数据进行加工处理  
  13.   login_times terminated by “,”, NULLIF(login_times=’NULL‘) –可为列单独指定分隔符  
  14.   last_login DATE “YYYY-MM-DD HH24:MI:SS” NULLIF (last_login=“NULL”) — 当字段为”NULL”时就是 NULL  
  15. )  
  16. BEGINDATA –数据从这里开始  
  17.    ,USER_ID,USER_NAME,LOGIN_TIMES,LAST_LOGIN  
  18. 1,1,Unmi,3,2009-1-5 20:34  
  19. 2,2,Fantasia,5,2008-10-15  
  20. 3,3,隔叶黄 莺,8,2009-1-2  
  21. 4,4,Kypfos,NULL,NULL  
  22. 5,5,不知 秋,1,2008-12-23  


2) 执行一样的命令：

sqlldr  dbuser/dbpass@dbservice  control=users.ctl

比 如，在控制台会显示这样的信息：

C:\>sqlldr  dbuser/dbpass@dbservice  control=users.ctl

SQL*Loader: Release 9.2.0.1.0 – Production on 星期三 1月 7 22:26:25 2009

Copyright (c) 1982, 2002, Oracle Corporation.  All rights reserved.

达到提交点，逻辑记录计数4
达到提交点，逻辑记录计数5



上面的控制文 件包含的内容比较复杂(演示目的)，请根据注释理解每个参数的意义。还能由此发掘更多用法。

最后说下有关 SQL *Loader 的性能与并发操作


1) ROWS 的默认值为 64，你可以根据实际指定更合适的 ROWS 参数来指定每次提交记录数。(体验过在 PL/SQL Developer 中一次执行几条条以上的 insert 语句的情形吗？)

2）常规导入可以通过使用 INSERT语句来导入数据。Direct导入可以跳过数据库的相关逻辑(DIRECT=TRUE)，而直接将数据导入到数据文件中，可以提高导入数据的 性能。当然，在很多情况下，不能使用此参数(如果主键重复的话会使索引的状态变成UNUSABLE!)。

3) 通过指定 UNRECOVERABLE选项，可以关闭数据库的日志(是否要 alter table table1 nologging 呢?)。这个选项只能和 direct 一起使用。

4) 对于超大数据文件的导入就要用并发操作了，即同时运行多个导入任务.































































免责声明：本站所有文章内容,图片，视频等均是来源于用户投稿和互联网及文摘转载整编而成，不代表本站观点，不承担相关法律责任。其著作权各归其原作者或其出版社所有。如发现本站有涉嫌抄袭侵权/违法违规的内容,侵犯到您的权益，请在线联系站长,一经查实,本站将立刻删除。 本文来自网络,若有侵权，请联系删除，如若转载，请注明出处：https://haidsoft.com/140355.html

赞 (0)
老牧童老牧童
0
上一篇 2025-05-27 14:45
下一篇 2025-05-27 15:00

相关推荐

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

关注微信