"地瓜哥"博客网

多表关联下的测试数据制造方法系列

1. 多表关联下的测试数据制造方法（一）：思路详解
2. 多表关联下的测试数据制造方法（二）：将数据导出为CSV文件

　　在上一节，D瓜哥给大家介绍了一下如何使用存储过程，将数据导出成CSV文件。既然有数据文件了，我们该如何将这些数据导入到数据库中呢？！Oracle数据库提供了SQL Loader这样一个将数据文件导入到数据库中的功能。这篇文章将给大家介绍一下SQL Loader的用法。另外，再炒炒剩饭，把D瓜哥以前使用TCL语言写的脚本分享给大家。

SQL Loader简介

概念

　　SQL Loader是ORACLE的数据加载工具，通常用来将操作系统文件（数据）迁移到ORACLE数据库中。SQL Loader是大型数据仓库选择使用的加载方法，因为它提供了最快速的途径（DIRECT，PARALLEL）。

用法

　　首先，建立需要导入数据的表。如果存在就不需要新建了。

　　其次，编写一个控制文件。内容如下：

　　最后，SQL Loader的使用也很简单，只需要一条指令。如下：

　　补充一句，控制文件高亮的一行是控制SQL Loader进行何种操作的。SQL Loader共提供四种操作分类：

1. insert，为缺省方式，在数据装载开始时要求表为空；
2. append，在表中追加新记录
3. replace，删除旧记录，替换成新装载的记录；
4. truncate，同上

　　这里，只给大家介绍这么多。如果想了解详细情况，请阅读Oracle提供的官方文档，文档中详细描述了SQL Loader的方方面面。

TCL导入脚本

　　上面简单介绍了一些SQL Loader的一些知识。下面给大家分享要给由TCL写成的使用SQL Loader导入数据的脚本。

　　关于TCL语言运行环境的配置，请看“D瓜哥的开源项目：CompareDatamodel”，D瓜哥在这篇文章里做过介绍。

配置文件

　　这个配置文件不是上面提到的”控制文件”。废话不多，直接上内容：

读取配置文件

　　有配置文件了，需要有读取配置文件的脚本，如下：

　　注意，这个脚本不能直接使用。需要导入到其他文件才能用。具体用法见下面。

导入脚本

　　上面所有的铺垫工作已经做完。现在该主角登场了。导入脚本如下：

　　由于，SyntaxHighlighter不能提供TCL语言的高亮显示。所以，这里的高亮可能还有一些问题。抱歉！

　　D瓜哥最近接触了一些Ruby语言，Ruby真是一个灵活的语言，同样也很好玩。非常适合自定义DSL，以后有时间D瓜哥把这个脚本再用Ruby重写一遍。

　　到这里，这个系列基本结束。可能还有一些问题。例如：

1. 使用先制作成数据文件，然后在使用SQL Loader导入到数据库中这种方式，需要监控数据文件的生成完成时间，然后再使用进行导入。但是，制作和导入，前者在数据库中使用存储过程完成；后者使用TCL（当然也可以使用其他语言完成）。横跨两个环境，监控起来不方便；
2. 使用这种方式，需要在数据库服务器上安装TCL运行环境；

　　综上，D瓜哥认为使用Shell脚本应该可以完整完成这个全部过程。不过，D瓜哥目前还不会写Shell，这个就留给感兴趣的朋友自己练手吧。当然，如果以后D瓜哥使用Shell实现了，还会发布出来的。

　

参考资料

1. sqlldr的介绍
2. SQL*Loader 详解
3. 使用SQL Loader导入大量数据，避免使用SQL频繁写库
4. Oracle官方文档：SQL*Loader

　

修改日志

　　2013年3月28日　　补充问题列表。