NiFiプロセッサを使用してhadoopにフェイスブックデータをフェッチする手順

Question

NiFiプロセッサを使用してfacebookデータをhdfsにフェッチする方法はありますか？これまでのところ単一のソースやサンプルを見つけられませんでした...可能ならば？手続きは何ですか？

Answer 1

Facebook APIとのやり取りにHTTPプロセッサ（GetHttp、PostHttp、InvokeHttp）を使用できるはずです。 OpenGraph API（とその他のもの）の場合、HTTPSが必要なので、SSL Contextなどを設定する必要があります。これを行う方法を説明しているhttps://community.hortonworks.com/questions/20424/add-certificates-facebook-to-apache-nifi.htmlに良い交流があります。

データがFacebookやあなたのフローから外れたら、PutHDFSを使ってファイルをHadoopに書き込むことができます。