バッチタスクはファイル共有上のファイルを読み取ることができますか？

Question

私は（あなたが推測した）ファイル共有をたくさん持っています。私は、このファイル共有をマウントするバッチジョブを作成し、それぞれのファイルを読み込み、それぞれを並列処理します（それぞれバッチタスクとして）。

これはpythonと紺碧のバッチで可能ですか？これを行う方法を示すチュートリアルはすばらしいでしょう。

Answer 1

これは2つの方法のいずれかで実行できます。以下はLinuxにのみ適用されます。 WindowsユーザーはUser Identitiesを使用してわずかに異なる方法に従う必要があります。

1. プールのStartTaskオブジェクトを使用して、計算ノードレベルにファイル共有をマウントします。 Linuxのディストリビューションでこれを行う方法については、Azure File documentationを参照してください。開始タスクは次のいずれかです。
   • ファイル共有を直接マウントします。つまり、mount -t cifs ...を呼び出します。これは、再起動時に毎回StartTaskが再実行されるため、再起動しても動作します。
   • /etc/fstabを変更して、automountにエントリを追加します。再起動時に毎回StartTaskが再実行されるため、この操作は偶発的にする必要があります。
2. ジョブのレベルでジョブのJobPreparationTaskオブジェクトを使用してファイル共有をマウントします。ここで指定するコマンドは、そのジョブのすべてのタスクに対して1回だけ実行されます。おそらく、ジョブのクリーンアップのために、JobReleaseTask〜unmountの共有を指定する必要があります。

任意のパスを選択して、プロセスがマウントまたは変更を実行できるようにタスク（通常はスーパーユーザー）に適切な昇格特権が与えられていることを確認してください。/etc/fstab。

最初のオプションを使用すると、必要なジョブがそのノードで実行されているかどうかにかかわらず、計算ノードに計算ノードが常に使用可能になります。それぞれのアプローチには長所と短所があります。あなたの要件は、それがコンプライアンスであるか、技術的なもの（たとえば）があなたの選択に役立つはずです。