-1
52,000行の.CSVファイルがあります。各行には区切り文字 '|'で区切られた13個の列があります。 11行目に不正なデータが挿入されているため、ファイル内に新しい改行文字が挿入されています。私はそれらを削除するはずです。50,000行以上の.CSVファイルで改行文字を削除する必要があります。 linuxコマンドが必要です。
A
答えて
1
これを試すことができます。
awk -F '|' -v fields=13 '{c+=NF; s=(s?s OFS:"") $0} c>=fields{print s; s=""; c=0}' yourfile.csv
[email protected]:/tmp$cat test
1|2|3|4|5|6|7|8|9|10|11|12|13
1|2|3|4|5|6|7|8|9|10|11|12|13
1|2|3|4|5|6|7|8|9|10|11|12|13
1|2|3|4|5|6|7|8|9|10|11
|12|13
1|2|3|4|5|6|7|8|9|10|
11|12|13
[email protected]:/tmp$ awk -F"|" -v fields=13 '{f+=NF; str=(str?str OFS:"") $0} f>=fields{print str; str=""; f=0}' test
1|2|3|4|5|6|7|8|9|10|11|12|13
1|2|3|4|5|6|7|8|9|10|11|12|13
1|2|3|4|5|6|7|8|9|10|11|12|13
1|2|3|4|5|6|7|8|9|10|11 |12|13
1|2|3|4|5|6|7|8|9|10| 11|12|13
+0
その文字列に改行文字はありません。 'echo -e'で試してみてください。 – Kusalananda
関連する問題
- 1. 50,000以上の画像をダウンロードする必要があります
- 2. array（）内のCSV行は、改行を維持する必要があります
- 3. grep文で行を除外する必要があります
- 4. my_sql、1行目を削除する必要があります
- 5. 一致する文字列以外の行全体を削除する必要があります
- 6. トリガースクリプトに改行文字を追加する必要があります
- 7. Python; csvライターは改行で始める必要があります
- 8. Cocoaアプリケーションでコマンドを実行する必要があります
- 9. コードフォーマッタが必要な改行を削除する
- 10. 大きなファイルを削除する必要があります
- 11. ありますか？MySQLのテキストセルに改行/特殊文字を格納する必要がありますか？
- 12. 不要なスペースエレメントを削除する必要があります
- 13. Android Studioでキャッシュを削除する必要があります
- 14. GLSurfaceViewでテクスチャを削除する必要がありますか？
- 15. 重複する行を削除する必要があります
- 16. CSVの発行が必要
- 17. ListViewで必要以上のスペースがあります
- 18. R - do print（）で明示的に改行文字を追加する必要がありますか？
- 19. 下限が必要以上です（テキストの長さと同じにする必要があります）
- 20. spannableStringの一部を削除する必要があります
- 21. カフカストリームのヌルを削除する必要があります
- 22. 配列のハイフンを削除する必要があります
- 23. jqueryでiframe要素を削除する必要があります
- 24. 私は行以上のposgresqlが必要です
- 25. phpがLinuxサーバで機能する必要があります
- 26. スパークRDD、（キー、（タプル））以上削減する必要がある
- 27. イベントハンドラを削除する必要がありますか？
- 28. Elasticsearchエイリアスを削除する必要がありますか？
- 29. 仮想インデックスを削除する必要がありますか？
- 30. OOP - 投稿を削除する必要がありますか？
こんにちはKiranさん、歓迎されるStackoverflow！もっと情報をお願いします。これまでに何を試みましたか？良い質問をするには良い方法です：http://stackoverflow.com/help/how-to-ask – Jurik
Linuxでは、ファイルのすべての行に最後に改行文字があります。あなたは、削除したい改行をより具体的にすることができますか？ –