azure-data-lake

1熱

1答えて

U-SQLカスタム抽出プログラムを使用して複数のファイルを動的に出力する方法は？

複数のファイルからデータを読み取るU-SQLクエリを作成しました。今私はいくつかの他のフォルダ内の複数のファイルにデータを出力する必要があります。私はどのようにすることができ public class SampleExtractor : IExtractor { private Encoding _encoding; private byte[] _row_delim;

c# azure azure-data-lake u-sql 2017-07-19

---

1熱

1答えて

.Avroファイルを生成したU-SQLカスタム出力器で手助けできます

.Avroファイルを生成したU-SQLカスタム出力を探しています。提案やサンプルを提供するのを手伝ってもらえますか？

avro azure-data-lake u-sql argument-dependent-lookup 2017-07-19

---

0熱

1答えて

IoTハブからAzure Data Lakeへのメッセージのルーティング

私はAzure IoT Hubに合計約500000個のメッセージを送信するセンサー（現在は350個）を持っています。センサーは異なるサイズの研究にグループ化されており、毎月それらの研究について報告する必要があります。 ストリームアナリティクスを使用しようとしましたが、メッセージをそれぞれの場所に動的にルーティングする方法が見つかりませんでした。私は各研究のために個々の成果を追加しなければならない。

azure azure-data-lake azure-iot-hub azure-stream-analytics 2017-07-20

---

1熱

1答えて

失敗したファイルを見つける方法？

私は7400ファイルからデータを抽出するU-SQLジョブを実行していますが、 "E_RUNTIME_USER_ROWTOOBIG：行のサイズが4194304バイトの最大許容サイズを超えています"というエラーが発生します。どのファイルがジョブの失敗を引き起こしているかに関する情報はありますか？私は何も見つけることができません。

azure-data-lake u-sql 2017-07-22

---

2熱

2答えて

gzipと仮想カラムを使用したu-sqlの問題

私は、zipファイルを処理するu-sqlジョブに奇妙な問題があります。 通常のcsvファイルでu-sqlを実行すると正常に動作します。私はそれはもう動作doenstファイルをgzipなら（E_RUNTIME_USER_EXTRACT_ENCODING_ERRORを生成：エンコーディングエラーが頂点」入力分割で0レコード（複数可）を処理した後に発生しました。） だから動作するコードが DECLARE

azure-data-lake u-sql 2017-07-25

---

1熱

1答えて

スクリプトのパス

。 scriptPathのために具体的には、上記のような問題は、アクティビティのオプション"typeProperties"に存在することを思いついたプロジェクトと間違って何ができるかまで把握しようと 25/07/2017 18:51:59- Publishing Project 'Premium.DataFactory'.... 25/07/2017 18:51:59- Validating 6

pipeline azure-data-factory azure-data-lake u-sql 2017-07-25

---

0熱

2答えて

.NETフレームワークで書かれたAzure Data Lakeの追加機能で単体テストを実行する方法？

私は、ファイル作成のためのメソッドとDatalake Store上のそのファイルへのデータの追加を含むAzure webjobを作成しました。私はすべての開発部でwebjobsなどを公開しています。今、私は送信しているデータが正常にファイルに追加されているかどうかをテストする単体テストを書くつもりです。私が知る必要があるのは、アイディア？ 私が現在考えているのは、自分のデータレックファイルのすべて

unit-testing azure azure-data-lake azure-webjobssdk 2017-07-27

---

0熱

1答えて

Azure分析サービスにData Lakeストアを接続する方法

Azure分析サービスにData Lakeストアを接続する方法 HIVE ODBCまたは他のオプションを使用できますか？

hdinsight azure-data-lake azure-analysis-services 2017-07-29

---

0熱

1答えて

TaskCanceledException CancellationToken.Noneを使用してConcurrentAppendAsyncを使用してコンテンツを同時に追加するとき

json形式のログをAzure Data Lakeのファイルに書き込むログシステムを作成しました。複数のスレッドがそのファイルに書き込んでいるので、私はConcurrentAppendAsyncメソッドを使用しています。 私はこのようなアクセスを初期化： var clientCredential = new ClientCredential(ClientId, ClientSecret); va

azure azure-data-lake 2017-07-31

---

0熱

2答えて

usqlを使わずにdatalake storeのcsvファイルから行を削除するには？

データレーン上のCSVファイルにデータを追加するためのユニットテストを書いています。同じファイルにテストデータを追加してテストしたいのですが、見つかったら挿入した行を削除したいのです。基本的に私はテストデータを見つけたら私のテストは合格しますが、テストは本番環境で実行されるので、テストデータを検索する必要があります。つまり、テストを実行した後にファイルに挿入した行を見つけなければなりません。 us

unit-testing azure azure-data-lake 2017-08-01

---