大きなデータセット用のSQL Server一括挿入

Question

ファイルに100万行のデータがありますが、すべてのレコードをSQL Serverに挿入します。挿入中に、サーバー上の既存のデータと比較していますが、比較が満足すれば、サーバー上の既存のレコードを更新するか、ファイルからレコードを挿入します。

私は現在、この作業を完了するのに3時間以上かかるC＃からループしています。誰もがパフォーマンスを改善するためのアイデアを提案できますか？

ありがとう、 Xavier。

Answer 1

1. チェックフルまたは単純復旧モードで使用しているデータベースの場合：

   SELECT recovery_model_desc FROM sys.databases WHERE name = 'MyDataBase';

2. データベースは、あなたがすぐそこステージング表を作成することができSIMPLEリカバリモードである場合。 Fullモードの場合は、Simpleモデルの別のデータベースにステージングテーブルを作成することをお勧めします。 （すでに示唆したように、例えばBCPのための）
   
3. は
   
4. 挿入ターゲットテーブルに存在しないステージング表からのデータのみを、任意のBulkInsert操作/ツールを使用してください。 （あなたがそれを行う方法を願ってほしい）