JsonローダーとJson serdeを使ってPig、hive、sqoopを使ってhadoopの構造化データや半構造化データをインポートして分析する方法は分かっていますが、ビデオやオーディオ、画像などの非構造化データをインポートする方法と、あなたが大きな助けになる非構造化データを分析するユースケースがあれば、簡単なステップバイステップで親切に説明してください。ありがとう!Hadoopでビデオやオーディオ、画像をインポートするにはどうすればいいですか。
1
A
答えて
0
Hadoopは小さなファイルではうまく動作しないため、バイナリファイルを少数の大きなファイルにグループ化することができます(小さなファイルが大量にあるので を処理しないようにする)。
これを実行するには、HDFSに集約して保存するカスタムUDFを使用して、バイナリファイル(イメージ、オーディオ、ビデオなど)をシーケンスファイルに変換することができます。
このトピックに関するいくつかのデザインパターンは、Pig Design Patternsで提供されています(第2章を参照)。
https://www.packtpub.com/mapt/book/big_data_and_business_intelligence/9781783285556
いくつかのコードsnipetsはgithubの上でご利用いただけます。
https://github.com/pradeep-pasupuleti/pig-design-patterns/blob/master/Chapter2
は、このヘルプを願っています!
関連する問題
- 1. ビデオに画像をオーバーレイするにはどうすればいいですか?
- 2. ビデオ画像処理、どうすればいいですか?
- 3. iPhoneで画像を漫画や白黒に変えるにはどうすればいいですか?
- 4. ffmpegで1オーディオと1画像を組み合わせるにはどうすればいいですか
- 5. Wordpressで画像の上にビデオを配置するにはどうすればいいですか?
- 6. REST API経由でLinkedInに動画や画像をアップロードするにはどうすればよいですか?
- 7. キャプチャしたビデオ/画像にオーバーレイテキストを追加するにはどうすればいいですか?
- 8. グラフAPI経由でイベントに画像やリンクを投稿するにはどうすればいいですか?
- 9. Androidで画像や動画のテキストフィールドを保存するにはどうすればよいですか?
- 10. Magmi経由で他のサーバの画像をインポートするにはどうすればいいですか
- 11. alamofireで画像をアップロードするにはどうすればいいですか?
- 12. Javaで画像をジャンプするにはどうすればいいですか
- 13. iphone ..のサーバーに画像/オーディオ/ビデオをアップロードしていますか?
- 14. Gitリポジトリで画像を扱うにはどうすればいいですか?
- 15. PHP&MYSQL - 画像データはどうすればいいですか?
- 16. 画像やファイルにiphoneのブラウズボタンを使用するにはどうすればいいですか?
- 17. Google Carboardビデオとのやりとりはどうすればいいですか?
- 18. Tkinterキャンバスにインポートされた画像を拡大するにはどうすればよいですか?
- 19. 画像を再生するにはどうすればいいですか?
- 20. オーディオ(.mp3/.wavなど)データをAnkiデッキに一括インポートするにはどうすればよいですか?
- 21. webcamに接続してアクセスして、opencvを使わずに処理するビデオや画像を取得するにはどうすればいいですか?
- 22. Twilioオーディオをスクリプトにストリームするにはどうすればいいですか?
- 23. youtubeビデオからオーディオ/ビデオデータを受信/取得するにはどうすればよいですか?
- 24. 画像の座標を使うにはどうすればいいですか
- 25. アンドロイドの画像ライブラリを扱うにはどうすればいいですか?
- 26. tabBarスウィフトで項目や画像の色を変更するにはどうすればよいですか?
- 27. 画像の幅を広げるにはどうすればいいですか?
- 28. Androidのギャラリーから画像ボタンの画像を変更するにはどうすればいいですか?
- 29. ASP.NETでビデオやオーディオを再生する
- 30. Python:Gstビデオ再生ビンからビデオ解像度を取得するにはどうすればよいですか?
本当にありがとうございました。本当に助かりました。 – user8167344