apache nifi、hdfs parquet format

Question

私はNIFIの初心者です。ポートから読み込んで、寄木張りの形式でhdfsに書き込むのが私の研究で、KiteSDKと呼ばれるものがあり、これを寄木張りの形式私はそうですか？アドバイスをしてください。

Answer 1

確かに、Apache NiFiには、パスを手助けするプロセッサが用意されています。 ListenTCPはソケットからデータを取得できます。データのタイプに応じて、変換プロセッサの一部を潜在的に使用して、変換することができます。 Parquetを出力形式として直接サポートしているかどうかは不明です。もちろん、HDFSへの配信もサポートされています。不足している部分については、ApacheのコミュニティでJIRAを作成したり、おそらくExecuteScriptを使って投稿を提出したり、インラインスクリプトを書くことができます。たくさんのオプション。

おかげ ジョー

Answer 2

あなたはPutParquetプロセッサを使用することができます。