0
私は自分のマシンにローカルにDataFlowパイプラインを設定しました。これは、JSONオブジェクトでいっぱいになったサンプルの改行で区切られたファイルを取得します。その結果、最終結果はTableRow
になります。 BigQueryに書き込むときは、認証方法がわかりません。私はDataflowのドキュメンテーションや、ローカルパイプラインを使ってBigQueryに書き込むサンプルを見つけることができませんでした。可能であれば、私はそれをやる方法を知りたいと思います。ローカルDataFlowジョブを使用したBigQueryへの書き込み
...
session_windowed_items.apply(ParDo.of(new FormatAsTableRowFn()))
.apply(BigQueryIO.Write
.withCredentials/Token(SOME_TOKEN) // <- This line
.withCreateDisposition(BigQueryIO.Write.CreateDisposition.CREATE_NEVER)
.to("project:db.table"));
...
または
...
PipelineOptions options = PipelineOptionsFactory.create();
options.setGoogleCloudCredentials/Token(SOME_TOKEN) // <- This line
Pipeline p = Pipeline.create(options);
...