WebApi経由で大容量ファイル（1〜3GB）をアップロード

Question

C＃WebAPIを呼び出して暗号化してからSQL DBに格納する大容量ファイル（1〜3GB）をアップロードするJS/HTML5フロントエンドがあります。

私の制限は、ファイルを暗号化せずに保存することができず、SQLの外に保存することができないということです。 SQL FileStreamも使用できません。

WebAPIについては、WebHostBufferPolicySelectorをオーバーライドしてBufferStreamを無効にして、メモリの例外を処理しました。これにより、メモリフットプリントを大幅に増やすことなくファイルをディスクに直接アップロードすることができます。

ファイルを構成する一連の暗号化されたチャンクを、SQLテーブルの行に順番に格納したいとします。その後、チャンクを取り出して解読し、リクエストされたときにそれらをユーザーに戻すことができました。

私はマルチデータ部分メッセージを受け取り、チャンクを暗号化し、データベースの行に書き込む方法がわかりません。誰かが私のやり方を正しい方向に向けることができますか？

Answer 1

OK。つまり、RAMを使い果たしていないWebAPIの問題を解決しました。しかし、次の懸念は、データをSQL Serverに渡す必要があることです。要求ストリームを.NETストリーム暗号化装置のいずれかを介してパイプすることができますが、その後はどこかに行く必要があります。カスタムストリームがチャンクでSQL Serverにデータを送信するための責任を負うことになります>カスタムストリーム

- >暗号化 -

要求ストリーム：

は、私はあなたのような何かを示唆しています。チャンクのサイズを微調整することはできますが、1GB以上の引数サイズを持つsqlコマンドを送信しないようにすることが基本的です。あなたのカスタムストリームのsqlコマンドは、固定のバッファサイズを指定すると、アップロードをバイトのチャンクに分割します。バッファが一定量以上になると、SQL Serverに行を書き込み、バッファをフラッシュして、暗号化ストリームからより多くのデータが入るのを待ちます。書かれた行は、何らかの種類のIDと一緒に結び付けられます。もちろん、それらを再組み立てするときに使用する順序を示すシーケンス番号もあります。

データを送り返したい場合は、これをもう一度やり直してください。逆です。