azure-data-lake

1熱

1答えて

Azure Data Lake Store Java SDKを使用したプロキシ経由のアクセス

Azure Data Lake Store Client SDKでプロキシを設定する方法がわかりませんでした。私は企業ネットワークで働いており、AzureにアクセスできるようにAzureとResourceManagerクラス（.withProxy（..））を使用してプロキシを設定する必要があります。私は何かを逃しているのですか？ありがとう

0熱

1答えて

スパークジョブからADLSで認証するためのユーザー資格情報を動的に取得する

スパークジョブ内からADLSで認証するためのユーザー資格情報を取得する方法はありますか？私は、スパーク・ジョブでユーザーがデータを読み取るために使用するライブラリを作成しようとしており、実装の詳細を隠したいと考えています。また、スパーク・ジョブからユーザーの資格情報を取得する最善の方法は何ですか？

0熱

1答えて

U-SQL：2つのusqlファイルを同じimport文でマージする方法

コストを節約するために、複数のテーブル作成スクリプトを1つのadlaジョブとして展開したいと考えています。私はパッケージを使用して、すべてのテーブルに対して定義されたパーティションキーのセットを取得しています。マージされたスクリプトとして展開しようとすると、importステートメントが複数回宣言されて失敗するという不満があります。私はまだスクリプトを1つずつデプロイできますが、スクリプトをマージ

0熱

1答えて

フォルダを再帰的にAzureにアップロード

大量のデータをAzure DataLakeにアップロードしようとしています。マイクロソフトからexampleに続いて、にコマンドを変更する：私はその中にフォルダの任意のフォルダ内のすべてのファイルを取得することはできませんが、 Import-AzureRmDataLakeStoreItem -AccountName $dataLakeStoreName -Path "C:\Users\me\Dat

2熱

1答えて

VS2017データレイクツールがAzureにU-SQLスクリプトを送信できません

Visual Studio 2017をData Lake Tools v。2.3.1000.1で使用すると、U-SQLジョブを直接Azureにサブミットできません。私はローカルでのみ提出するオプションがあります：は、これは私が私が私のU-SQLデータベースにアクセスすることができ、そこから、「サーバーエクスプローラ」ツールの窓から紺碧に接続されていていてもそうである、ビューVisual Stud

0熱

1答えて

Azure Data LakeからSQL Serverにデータを抽出する最良の方法

私はAzure内のVMにインストールされているAzure Data LakeからMSSQLデータベースにデータを抽出するための最良のプログラム方法を探しています。は現在、私は次のオプションを検討しています： Azure Data Factory SSIS（Using Azure Data Lake Store Connection Manager）ユーザー定義Example1出力手段、Azur

1熱

2答えて

外部依存関係をチェックせずにUSQLプロジェクトを構築することは可能ですか？

私はこのエラーを取得していますVisual Studioで私のUSQLプロジェクトをビルドしようとしているとき：明らか Error E_STORE_USER_FILENOTFOUND: File not found or access denied: wasb://[email protected]/file.txt. Description: Unable to obtain informati

1熱

1答えて

データ上流側の依存関係のファクトリ待機タイムアウト

現在、データファクトリV1を使用しています。：は、私は2つのチェーン活動とのパイプラインを持っています。最初のアクティビティは、SQL ServerからData Lake Storeの.tsvファイルにテーブルを抽出するコピーアクティビティです。。 2つ目のアクティビティは、以前作成した.tsvファイルのデータを収集し、Data Lakeデータベースの既存のテーブルに追加するData Lak

2熱

1答えて

SSISのData Lake Storeソースの出力タイプを変更

Azure Data Lake Store Sourceを使用する場合、列の出力タイプを変更できますか？現時点ではDT_WSTR(100)ですが、私のソースファイルには100文字分の大きなフィールドが含まれています。だから、値は切り捨てられ、それは私が持っている行動ではありません。