アズールブロブ貯蔵;派生カラム

Question

私はAzureブロブストレージにあるデータの別のカラムから派生カラムを作成しようとしています。私がどこから始めるべきかの指針。私が扱っているデータセットは構造化されたものです。

input dataset= [col_a, col_b, col_c] 
output_dataset= [col_a, col_a^2, col_a*3, col_b] 

Answer 1

データセットのサイズが大きくない場合は、次の手順を試してみてください。

1. すべてのデータをAzureブロブストレージから読み取ります。
2. データをデータセットにデシリアライズします。
3. データセットに新しい列を追加し、この列の値を計算します。
4. データセットをデシリアライズし、データをAzureブロブストレージに保存し直します。

それ以外の場合は、Azureブロブストレージからデータセットを読み込み、新しい列の値を計算し、行ごとに新しい場所に保存する必要があります。データセットをBLOBにどのように格納したかによって異なります。