關于ORACLE單表導入導出的問題！高人進

輻射

利用EXP和IMP進行導入導出，如果單表的數(shù)據(jù)量過大，會占用大量的回滾段。
有沒有更簡潔的方法，從一張大數(shù)據(jù)量的表內將數(shù)據(jù)導出，再導入到另一個數(shù)據(jù)庫的表中。
使用工具的話，目前我手上到是有一個。有其他工具的也可以介紹介紹。

OCPHUI

一點小建議:
用imp:

1. 將被導入表設置成nologging
2.先不要在被導入表上建index
3.將每次批量提交地參數(shù)設小一點

stlyy

db1 數(shù)據(jù)源庫 ，db目標庫

db1和db網(wǎng)絡通的情況下可用這種方法

sqlplus usr/pwd@db
create database link db1 connect to user identified by pwd using db1net;
create table dist_table as select * from src_table@db1;

alter table dist_table primary key(xxx);
...
我導過 60萬記錄，速度很快。

[ 本帖最后由 stlyy 于 2007-4-18 16:49 編輯 ]

輻射

2樓的，弱弱的問下，怎樣設置nologging
imp的時候 貌似沒有提交的參數(shù)啊！

3樓的是設置數(shù)據(jù)通道么？有沒有詳細的發(fā)給瞧瞧，
不是很明白你的SQL  為什么要修改主鍵？

mys3721

建個DBlink不行嗎?直接查了插入。

OCPHUI

原帖由 輻射 于 2007-4-18 20:07 發(fā)表
2樓的，弱弱的問下，怎樣設置nologging
imp的時候 貌似沒有提交的參數(shù)啊！

3樓的是設置數(shù)據(jù)通道么？有沒有詳細的發(fā)給瞧瞧，
不是很明白你的SQL  為什么要修改主鍵？

alter table table_name nologging;

呵呵﹐ 用dblink 插入只是方便了寫﹐如果真是很大table的話﹐于效率沒有什么提升。

stlyy

原帖由 OCPHUI 于 2007-4-19 08:13 發(fā)表



alter table table_name nologging;

呵呵﹐ 用dblink 插入只是方便了寫﹐如果真是很大table的話﹐于效率沒有什么提升。

sql loader 最快
oracle 批插也很快
這種方法也不是很慢，一般還能用。

某人的比較結果：

數(shù)據(jù)：外部數(shù)據(jù)文件包含十萬條記錄，將近 6MB 的文件大小，
機器：CPU Intel P4，內存 256M，數(shù)據(jù)庫 Oracle 9i 企業(yè)版。


數(shù)據(jù)導入方法            總體導入時間(秒)      導入進程占用CPU時間(秒)
逐條數(shù)據(jù)插入INSERT                      172                           52
逐條數(shù)據(jù)插入INSERT，表暫無索引   130                           35
批量插入，表暫無索引                14                            7
Create As Select                            15                            8
INSERT Append as SELECT            15                            8
SQL*Loader 缺省導入選項           81                           12
SQL*Loader direct path 導入選項    9                            3


lz：可以再優(yōu)化一下
create table dist_table nologging as select * from src_table@db1;

這樣建的表是沒有原來表的一些屬性，需要手工改，例如：主鍵，需要在導入后建立。
這樣也好，導入失敗的可能性小，導入期間沒有約束檢查的開銷。

再討論討論。

[ 本帖最后由 stlyy 于 2007-4-19 11:56 編輯 ]

輻射

我現(xiàn)在要導的表，數(shù)據(jù)量大概有2千多萬條，而且表的容量相當龐大！
所以效率對我來講相當重要！

另外，同時我現(xiàn)在用的導入導出的工具，很吃本地機器緩存。512M大概只能支持100多萬的數(shù)據(jù)量。
6樓的，我沒試過修改nologging  這樣做會對單表產生什么影響？如果數(shù)據(jù)順利導入后是否要進行再一步修改回原樣？請指教。 另外手頭沒有關于nologgging的資料。正在查找。

fish617

導入導出時加參數(shù)direct=true,繞過緩存區(qū),直接對數(shù)據(jù)文件操作,會快些!如果表上有索引的話,alter index  ... unusable, alter session set skip_unusable_indexes=true. 試一下,看看是不是快了?

輻射

這種大數(shù)據(jù)量單表導入導出的使用范圍應該非常大才對。可是卻找不到詳細很有效的內容，
這樣的表如果有幾個，幾種導入的方法都非常耗費時間。有沒有人有好的工具！提供下！