私はPIGを使ってCSVファイルを読みたいのですか?私はload n pigstorage( '、')を使用しましたが、CSVファイルを正しく読み込むことができませんでした。なぜならデータにカンマ(、)が遭遇するからです。データをカンマで区切ってもdelimeterを与えるべきですか?データが入っているPIGのファイルを読み込む
1
A
答えて
2
2
データのコンマと区切り文字を区別することは、一般的には不可能です。 エスケープされたカンマを認識できる「データ」およびカスタムロード機能(Pig用)にあるコンマをエスケープする必要があります。
はこちらをご覧ください:あなたはCSVファイルを読みたい場合は
http://ofps.oreilly.com/titles/9781449302641/load_and_store_funcs.html
http://pig.apache.org/docs/r0.7.0/udf.html#Load%2FStore+Functions
-1
まず、有効なCSVファイルがあることを確認してください。この場合、ソースファイルをExcel(ファイルが小さい場合)や他のツールで変更したり、データの区切り記号(例:\ tab、;など)を付けて新しいCSVを書き出したりしないでください。 「良い」デリミタを持つ別の抽出を行うこともできます。あなたの負荷の
例は、このようなものになることができます( ';')
TABLE = LOAD 'input.csv' PigStorageを使用(SITE_ID AS:int型、 名:chararray、... );あなたのDUMPの
例: 'clean.csv' PigStorageを使用して( '')INTO
STORE表。 < - あなたに最高の
関連する問題
- 1. ファイルからデータを読み込む
- 2. Apache Pigでcsvファイルを読み込む際にエラーが発生しました
- 3. ファイルを読み込む(FORTRAN)
- 4. ファイルを読み込むpython
- 5. pickleファイルを読み込む
- 6. PIGローカルCSVを読み込めなくなってジョブが失敗する
- 7. 重いデータを読み込むには?
- 8. フリーザを使ってファイルの一部をバッファに読み込む
- 9. Kerasを使ってPythonで.matデータを読み込む
- 10. pandaSDMXを使ってパンダにOECDデータを読み込む
- 11. jqueryを使ってサーバーからデータを読み込む$ .post
- 12. SWFLoaderがswfファイルを読み込むのを待っています
- 13. Java 8を使用してファイルからデータを読み込む
- 14. JavaScriptを使用してXMLデータをKMLファイルに読み込む
- 15. Matlabにtxtファイルをインポートしてデータを読み込む
- 16. ubuntu読み込み可能なモジュールを使ってファイルを読む
- 17. ストリームを含むファイルを読み込む
- 18. シリアルリンクで読み込みを待っているデータの通知
- 19. ファイルから読み込む
- 20. 読み込む設定ファイル
- 21. ファイルから読み込む
- 22. App Engineでxlrdを使ってファイルを読み込むには
- 23. webpack2を使ってttfファイルを読み込む方法は?
- 24. ajaxとdjangoを使ってファイルを読み込む方法は?
- 25. ファイルから読み込まれたデータに応じて、ダイナミックバッファサイズの大きなファイルを読み込む方法。
- 26. ファイルを行単位で区切って読み込む方法
- 27. テーブルビューのデータを読み込む
- 28. APIレスポンスのデータを読み込む| iOS
- 29. 一定量のデータを読み込む
- 30. objective-c excelのデータを読み込む
私が試したありがとうとその作業... –
に合った区切り文字は何がCSV..iがCSVExcelStorageを得たが、そのことがpiggybank.jarに、私が構築することはできませんよと、ファイルを保存したい場合はそれは...どんな提案ですか? –