Google AdWordsのBigQueryデータ転送サービスで大口のレポートをインポートするとエラーが発生する

Question

BigQuery Data Transfer Service for Google AdWords大量のアカウントの一部のレポートの定期エクスポートに問題があります。転送は正しく設定され、中小規模のアカウントでも完全に機能します。しかし、大きなアカウントでは、私は1ヶ月以上で1日をインポートすることができませんでした。

エラーログを調べると、INSUFFICIENT_TOKENSで問題が発生しているようです。これはAdwords APIから直接データを取得する際に問題がないため、非常に奇妙です。

以下は、1回のインポートのログの例です。

Started Oct 22, 2017, 7:40:00 AM Ended Oct 22, 2017, 7:17:09 PM Run Name projects/<project_id>/locations/us/transferConfigs/<another_id>/runs/<run_id> Log Messages generic::unavailable: Error while processing report for table 'Ad'. <?xml version="1.0" encoding="UTF-8" standalone="yes"?><reportDownloadError><ApiError><type>ReportDownloadError.ERROR_GETTING_RESPONSE_FROM_BACKEND</type><trigger>Unable to read report data</trigger><fieldPath Oct 22, 2017, 7:03:24 PM generic::unavailable: Error while processing report for table 'Ad'. <?xml version="1.0" encoding="UTF-8" standalone="yes"?><reportDownloadError><ApiError><type>ReportDownloadError.ERROR_GETTING_RESPONSE_FROM_BACKEND</type><trigger>Unable to read report data</trigger><fieldPath Oct 22, 2017, 6:24:03 PM generic::unavailable: Error while processing report for table 'Ad'. <?xml version="1.0" encoding="UTF-8" standalone="yes"?><reportDownloadError><ApiError><type>ReportDownloadError.ERROR_GETTING_RESPONSE_FROM_BACKEND</type><trigger>Unable to read report data</trigger><fieldPath Oct 22, 2017, 5:45:24 PM generic::unavailable: Error while processing report for table 'Ad'. <?xml version="1.0" encoding="UTF-8" standalone="yes"?><reportDownloadError><ApiError><type>ReportDownloadError.ERROR_GETTING_RESPONSE_FROM_BACKEND</type><trigger>Unable to read report data</trigger><fieldPath Oct 22, 2017, 5:09:58 PM generic::unavailable: Error while processing report for table 'Ad'. <?xml version="1.0" encoding="UTF-8" standalone="yes"?><reportDownloadError><ApiError><type>ReportDownloadError.ERROR_GETTING_RESPONSE_FROM_BACKEND</type><trigger>Unable to read report data</trigger><fieldPath Oct 22, 2017, 4:35:58 PM generic::unavailable: Error while processing report for table 'Ad'. <?xml version="1.0" encoding="UTF-8" standalone="yes"?><reportDownloadError><ApiError><type>ReportDownloadError.ERROR_GETTING_RESPONSE_FROM_BACKEND</type><trigger>Unable to read report data</trigger><fieldPath Oct 22, 2017, 4:01:31 PM generic::unavailable: Error while processing report for table 'Ad'. <?xml version="1.0" encoding="UTF-8" standalone="yes"?><reportDownloadError><ApiError><type>ReportDownloadError.ERROR_GETTING_RESPONSE_FROM_BACKEND</type><trigger>Unable to read report data</trigger><fieldPath Oct 22, 2017, 3:27:40 PM generic::unavailable: Error while processing report for table 'Ad'. <?xml version="1.0" encoding="UTF-8" standalone="yes"?><reportDownloadError><ApiError><type>ReportDownloadError.ERROR_GETTING_RESPONSE_FROM_BACKEND</type><trigger>Unable to read report data</trigger><fieldPath Oct 22, 2017, 2:54:47 PM generic::unavailable: Error while processing report for table 'Ad'. <?xml version="1.0" encoding="UTF-8" standalone="yes"?><reportDownloadError><ApiError><type>ReportDownloadError.ERROR_GETTING_RESPONSE_FROM_BACKEND</type><trigger>Unable to read report data</trigger><fieldPath Oct 22, 2017, 2:22:26 PM generic::unavailable: Error while processing report for table 'Ad'. <?xml version="1.0" encoding="UTF-8" standalone="yes"?><reportDownloadError><ApiError><type>ReportDownloadError.ERROR_GETTING_RESPONSE_FROM_BACKEND</type><trigger>Unable to read report data</trigger><fieldPath Oct 22, 2017, 1:50:29 PM Transfer load date: 20171019 Oct 22, 2017, 1:15:08 PM Error code 1 : TRANSACTION_ROLLBACK: . Will retry later. Oct 22, 2017, 1:05:07 PM Error code 1 : INSUFFICIENT_TOKENS: . Will retry later. Oct 22, 2017, 12:55:06 PM Error code 1 : INSUFFICIENT_TOKENS: . Will retry later. Oct 22, 2017, 12:45:06 PM Error code 1 : TRANSACTION_ROLLBACK: . Will retry later. Oct 22, 2017, 12:35:05 PM Error code 1 : INSUFFICIENT_TOKENS: . Will retry later. Oct 22, 2017, 12:25:04 PM Error code 1 : INSUFFICIENT_TOKENS: . Will retry later. Oct 22, 2017, 12:15:04 PM Error code 1 : INSUFFICIENT_TOKENS: . Will retry later. Oct 22, 2017, 12:05:03 PM Error code 1 : INSUFFICIENT_TOKENS: . Will retry later. Oct 22, 2017, 11:55:03 AM Error code 1 : INSUFFICIENT_TOKENS: . Will retry later. Oct 22, 2017, 11:45:02 AM Error code 1 : TRANSACTION_ROLLBACK: . Will retry later. Oct 22, 2017, 11:35:01 AM Error code 1 : INSUFFICIENT_TOKENS: . Will retry later. Oct 22, 2017, 11:25:01 AM Error code 1 : INSUFFICIENT_TOKENS: . Will retry later. Oct 22, 2017, 9:54:05 AM Error code 1 : INSUFFICIENT_TOKENS: . Will retry later. Oct 22, 2017, 9:44:04 AM Error code 1 : TRANSACTION_ROLLBACK: . Will retry later. Oct 22, 2017, 8:30:03 AM Error code 1 : INSUFFICIENT_TOKENS: . Will retry later. Oct 22, 2017, 8:20:02 AM Error code 1 : TRANSACTION_ROLLBACK: . Will retry later. Oct 22, 2017, 8:10:02 AM Error code 1 : TRANSACTION_ROLLBACK: . Will retry later. Oct 22, 2017, 8:00:01 AM Error code 1 : INSUFFICIENT_TOKENS: . Will retry later. Oct 22, 2017, 7:50:00 AM Error code 1 : TRANSACTION_ROLLBACK: . Will retry later. Oct 22, 2017, 7:40:00 AM Dispatched run to data source with id 162523770456362 Oct 22, 2017, 7:40:00 AM

BigQueryのチームがそれを監視しているので、顧客サービスは、このチャネルを使用するように私に言いました。

これがクォータの制限に問題がある場合、これらの大きなアカウントのデータ転送にはどのように制限を増やすことができますか？

多くの感謝！

Answer 1

大変申し訳ありません。

展開が完了しました。エラーが発生すると、特定のテーブルをスキップします。

また、「除外/無効アイテムを除外する」というオプションをもう1つ追加しました（添付資料を参照）。それをチェックすると、削除されたアイテム/統計情報があなたのために取り出されることはありません - これを試してください。 Googleサービスのご利用いただきありがとうございます。

Answer 2

ご迷惑をおかけして申し訳ありません。 これは既知の問題です。アカウントに削除済みの広告が多すぎると、ダウンロードがブロックされている可能性があります。 これを修正するためにadwordsチームと協力していますが、おそらく2〜3ヶ月かかるでしょう。 潜在的な回避策：ダウンロードできない場合は、「広告」テーブルをスキップすることはできますか？これを行うことで、少なくとも他のテーブルを取得することができます。 （回避策はまだありませんが、受け入れることができればすぐに実装できます）