エラー - AzureデータファクトリからSQLデータベースからAzure Searchへの転送

Question

私は、Azureデータファクトリパイプラインをセットアップして、SQL Serverデータベースの1つのテーブルから新しいAzure Searchサービスにデータを転送しました。転送ジョブは継続的に、次のエラーを与える失敗：

Copy activity encountered a user error at Sink side: GatewayNodeName=SQLMAIN01,ErrorCode=UserErrorAzuerSearchOperation,'Type=Microsoft.DataTransfer.Common.Shared.HybridDeliveryException,Message=Error happened when writing data to Azure Search Index '001'.,Source=Microsoft.DataTransfer.ClientLibrary.AzureSearch,''Type=Microsoft.Rest.Azure.CloudException,Message=Operation returned an invalid status code 'RequestEntityTooLarge',Source=Microsoft.Azure.Search,'.

私がこれまでに読んだ、エンティティを要求からあまりにも大きな誤差は、RESTのAPIの中に発見標準HTTPエラー413です。私が行ったすべての研究の中で、このエラーを本当に診断して解決する方法を理解するのに役立つものは何もありません。

これをAzureに特定のコンテキストで処理した人はいますか？すべてのデータベースデータをAzure Searchサービスに取得する方法を知りたいと思います。 Azure側で許可されている要求サイズを増やすための調整がある場合は、インターネットやAzureのドキュメントでは、そうするためのプロセスが容易に利用できません。

Answer 1

このエラーは、Azure SearchシンクによってAzure Searchに書き込まれたバッチサイズが大きすぎることを意味します。デフォルトのバッチサイズは1000ドキュメント（行）です。 Azure SearchシンクのwriteBatchSizeプロパティを使用して、サイズとパフォーマンスのバランスをとる値に減らすことができます。 Push data to an Azure Search index by using Azure Data Factoryの記事のCopy Activity Propertiesを参照してください。次のように

例えば、writeBatchSizeは、シンク上で設定することができます。

"sink": { "type": "AzureSearchIndexSink", "writeBatchSize": 200 }