複数のファイルをロードするOracle 11gR2：sqlldrまたは外部テーブル？

Question

私は471ファイルの合計が約100GBです。ファイルは次の形式でトランザクションデータを持つ独立した「\ tの」、次のとおりです。

char(10) not null, 
char(8) not null, 
char(1) not null, 
char(4) not null, 
number not null, 
char(1) not null, 
char(1) not null, 
char(1) not null, 
number not null 

ファイルのトランザクションの順序が重要であり、理想的には、主キーIDと、保存する必要があります。最初は、これらのファイルをsqlldrでロードしましたが、非常に時間がかかります。私は最近、外部テーブルについて学びました。戦略的な観点から、どの方法が良いですか？外部テーブルはどのように機能しますか？ありがとうございました。

Answer 1

外部表とSQL * Loaderのレコード解析は非常に似ているため、通常は同じレコード形式で大きなパフォーマンスの違いはありません。 しかし、 外部表は、以下の状況で、より適切かもしれない：

• あなたはそれがデータベースにロードされるときにデータを変換したいです。
• データをロードする必要があり、ステージングテーブルの追加のインデックス作成が必要です。
• 最初に外部データを分割しなくても、透過的な並列処理を使用したいと考えています。

ただし、次のような状況では、最高の負荷性能のためのSQL * Loaderを使用します。

• あなたがリモートでデータをロードします。
• データに変換は不要であり、データをパラレルにロードする必要はありません。

SQL * Loaderのパフォーマンスを向上させるために、次の提案が行われました。

• コマンドラインで、次のオプションを追加してロード処理
• 中に負荷 テーブル上のインデックスおよび/または制約（主キー）をお持ちでない：TRUE = DIRECT。これにより、従来のパスローダーの代わりにダイレクトパスローダー を使用して、 がRDBMS処理のほとんどをバイパスします。ただし、ダイレクトロードを使用できない場合は、 というケースがあります。これらの制限は、 Oracleサーバー・ユーティリティー・ガイド
• 区切りのデータではなく固定幅のデータを使用して取得できます。区切りデータのために、各 レコードは、変換は、両方の時間と従来型パスのCPU 集中
• ているように、文字セット変換を回避READSIZEおよびBINDSIZEパラメータを使用するデリミタ
• 試行のためにスキャンする必要があります。
  READSIZEは、読み取りシステムコールごとに大きなデータチャンクを取得します。 BINDSIZEパラメータは、今度 にバッチ

ソースごとにロードされる行数を指定するバインド配列のサイズ指定：？外部表はどのように機能するのhttp://download.oracle.com/otndocs/products/database/enterprise_edition/utilities/pdf/sql_loader_faq.pdf