解决Oracle中ExpImp大量数据处理问题 电脑资料

Oracle的ExpImp批量数据处理故障排除计算机数据Oracle的exp/imp是许多用户常用的两个工具对于典型的中小型数据库，exp可以创建小于2GB的DMP文件，但exp可以生成数十到数百GB的数据。目前，大多数操作系统为32位，文件系统允许的最大文件为2GB。因此，在exp中生成的数据不能存储在文件系统中。这是问题之一。另一个问题是，随着数据库的增加，实施exp需要更长的时间。本文讨论了对上述两个问题的对策。以UNIX为例，我们来看一下如何突破2GB限制。这需要UNIX中的通用技术，如管道、数据复制工具DD和press。以下是一些技术的说明。，即可从workspace页面中移除物件。管道是一种伪文件。存在于内存中以实现快速I/O操作。管道的缓冲区使用先进先出机制，其中写入管道进程写入缓冲区头部，管道进程读取管道末端。用于创建管道的命令为mknod filename p 。，即可从workspace页面中移除物件。Dd允许您将数据从一个设备复制到另一个设备。，即可从workspace页面中移除物件。Press是UNIX数据压缩工具。在实施Exp之前，可以检查生成的DMP文件的大小。您可以执行以下所有步骤：1.建立管路：$ mknod /tmp/mypipe p2.将exp结果输出到此管道$ exp file=/tmp/mypipe3.仅读取管道以查看数据，并将结果输出到管道。$ DD if=/tmp/mypipe f=/dev/null结果返回exp()。Dmp)文件大小，以块(512 bytes)为单位。现在我们可以讨论具体的方法。1.文件压缩2.直接exp到磁带3.合并方法如果先看一下文件压缩方法1.开始press过程，从管道读取数据并将其输出到磁盘文件。$ mknod /tmp/exp_pipe p$ press/tmp/exp _ pipe export . DMP . z2.从exp到管道。$ expfile=/tmp/exp _ pipe.Imp的情况也类似。再看一下如何将exp直接添加到磁带。$ exp file=/dev/rmt/0m volsize=4G$ imp file=/dev/rmt/0m volsize=4G最后，如果你看一下从exp到原始设备的方法$ expfile=/dev/rdsk/c 0 T3 d0s 0 volsize=4g类似于Imp。使用这些方法可以避免2GB限制。以下说明如何减少exp缆线的使用时间。大多数用户在磁带上使用exp，因为剩馀的硬盘空间不足。整个exp过程所需的大部分时间都写入磁带。通过讨论UNIX工具，可以将数据从exp压缩到管道，然后输出到磁带。这大大减少了写入磁带的数据量，从而大大缩短了写入磁带的时间。此外，从Oracle内部角度看，从7.3版开始，用户可以执行direct path export。也就是说，跳过Oracle$ make-f $ Oracle _ home/RDBMS/lib/Oracle . mkexpst$ make-f $ Oracle _ home/RDBMS/lib/Oracle . MK impst上述步骤中创建的可执行文件exp单任务(expst)和impst的使用与exp/imp相同。与使用Exp/imp相比，可以节省多达