etl

0熱

1答えて

私はインフォーテナクタのターゲットで行レベルの識別を実装しようとしています。マッピングは既に存在し、リンクはすでに作成されていますが、この変更を1000を超えるマッピングで実装したいと考えています。 1000マッピングで列式を手動で追加するのは非常に面倒なので、現在のマッピングに影響を与えることなく、これをどうやって行うことができますか？これを行うより良い方法はありますか？伝えてください。私の質

0熱

2答えて

SSISパッケージとETLプログラムを.NETコンソールアプリケーション（C＃.NET）に置き換える？

私は、経験と理解に基づいて、以下のシナリオでスタックオーバーフローメンバーの考えを知りたいと思います。入力として20〜30百万のレコードが入力されます（入力は通常csvまたはxlsファイルで、役立つ場合はDBにアップロードできます）。これらのレコードを処理し、出力ファイルとエラーを含む異なるファイルを生成する必要がありますファイル。したがって、いくつかのビジネスロジックに基づいて、それらのレコー

0熱

1答えて

REST APIのツール

REST APIにデータを送信できるIBM ETLツールはありますか？または、ETLツールを設定してデータをWebサービスにエクスポートできますか？パイプラインの最後に倉庫にデータをロードするETLパイプラインがある場合を想定します。しかし、中間段階の1つでは、ウェブサービスを使用してデータを別のアプリにプッシュしたいと考えています。

0熱

1答えて

Python：PostgreSQLのテーブルのカラム名が二重引用符で囲まれているのはなぜですか？

質問：SQL ServerのあるテーブルからPostgresqlの別のテーブルにデータを移動しようとしています。 ETLプロセスは次のようになります。 def transfer_data(): sql = """SELECT TOP(100) * FROM LoanAgreements""" df = pd.read_sql(sql, lms_conn) df.to_

1熱

2答えて

Apache CamelとApache Airflowのオーバーラップはどのようになっていますか？

現在Apache-CamelをETLに使用しています。つまり、さまざまなデータベースから毎日、毎週または毎月のエクスポートを行い、必要なアクションを実行し、他のデータベースが取り込むために結果をどこかに公開します。最近、私はApache-Airflowの話を見ました。それは私にはキャメルがもっと簡単にやっている仕事をすることができるようです。簡単には、自己文書化がより容易になり、維持管理が容易に

0熱

1答えて

Pentahoを使用した更新/マージ/寸法の参照/更新の挿入

PostgreSQLにテーブル 'TICKETS'があります。このテーブルを作成するためにPentahoを使用してETLジョブを実行します。ユーザーが変更を加え、その結果がこの表に反映されるGUIもあります。表中のフィールドは次のとおりです。 "OID" Char(36) <------ **PRIMARY KEY** , "CUSTOMER" VARCHAR(255) , "TICKET

0熱

1答えて

希望の値を持つ変換

私はpowercenterデザイナでプロセスを試していますが、私は目的を達成できません。私はこれらの初期のデータを持っている： CODE CODE2 OPTION 001 A 89 001 A 55 001 A 12 002 B 25 002 A 59 025 A 44 私は次の操作を実行するコードのためにそれを取得する必要があります：CODEごとに複数の

0熱

1答えて

DataStage-無効な日付のフィールドを一覧表示する

無効な日付のフィールドを一覧表示するとします。現在、私は日付の有効性を確認するために以下の条件でのみ出てきました。 If IsValid('%dd-%mm-%yyyy',ln_source_1.A_Date) or IsValid('%dd-%mm-%yyyy',ln_source_1.B_Date) or IsValid('%dd-%mm-%yyyy',ln_source_1.C_Date

-1熱

3答えて

MYSQL変更データキャプチャ（Azure Data Factory） - Azureサービス（Azureデータファクトリ）

MYSQLデータベースのデータテーブルに対してETL操作を実行し、データをAzureデータウェアハウスに保存したいとします。私は更新日列を持たず、期間中に変更されたレコードを識別します。どのレコードが変更されているかを知るにはどうすればよいですか？ MYSQLデータベースはCDCをサポートしていますか？ azureサービス（Azureデータファクトリ）を使用してMYSQLバイナリログまたはバイナリ

0熱

1答えて

TableauをLookerデータベースに接続

私はAmazon RedShiftデータベースに保存されたデータを管理するためにLookerを使用しています。 Lookerにはダッシュボード機能がありますが、視覚化のためにTableauを使用したいと考えています。 TableauをLookerデータベースに接続する方法はありますか？（P.S：私のデータをTableauサーバーに公開するため、TableauをRedShift/S3に直接接続した