複数のデータソースからazure DWに同時にデータをアップロードすることはできますか？

Question

単一のパイプラインを使用して、複数のデータソースからAzure SQL DataWarehouseにデータを同時に取得できますか？

Answer 1

SQL DWでは、外部（別名PolyBase）テーブル、bcp、またはinsert文を使用して複数のテーブルを同時に読み込むことができます。 hirokibutterfieldが尋ねるように、あなたはAzure Data Factoryのような特定のローディングツールを指していますか？

Answer 2

はい、できますが、倉庫のデータウェアハウスにコピーされている各データソースのコピーアクティビティについて言及する必要があります。

Answer 3

はい、できます。必要な変換の程度に応じて、これを行うには2つの方法があります。この方法にかかわらず、データの移動はデータ・セットを参照し、関連するデータ・ソースに対して問合せを実行するコピー・アクティビティを介して行われるため、データ・ソースはADFに関係しません。

方法1：

テーブルのすべての変換は、ソース・システム上のSELECTクエリで行うことができる場合は、SELECTステートメントを指定してコピーアクティビティのセットを持つことができます。あなたの変換はSQLDWインスタンス（ステップ1）にテーブルをステージングにソースシステムからの生データをコピーするために、複雑な統合ロジック、最初の使用コピー活動を必要とする場合

：これは単純なアプローチ

方法2です。次に、一連のストアドプロシージャを使用して変換を実行します（ステップ2）。

ステップ1からの出力であるADFデータセットは、一貫性を維持するためにステップ2への入力データセットになります。