Csv文字列からキャリッジリターンを取り除く

Question

私はこのようにpandasを使用してCSV文字列を生成しています： df.to_csv(sep=',', encoding='utf-8', index=False, header=False)

私はポストグラムにcsvを次のようにロードします。私はcsv_str.replace('\r', '')を使用して削除し、CSV、キャリッジリターンが存在したときに

COPY table_name FROM STDIN (FORMAT CSV, 
    DELIMITER ',', 
    HEADER FALSE, 
    NULL '', 
    ENCODING 'utf-8'); 

時折、これは失敗します。しかし、私は、このアプローチがCSV内のいくつかの既存データを何らかの形で変更するかどうかはわかりません。

キャリッジリターンを削除する信頼性の高い方法はありますか？私はキャリッジリターンに関する情報を失うのは問題ないですが、私はcsvファイルに格納されている他のデータを可能な限り保存したいと思います。

Answer 1

キャリッジリターンをCSVファイルから取り除くのではなく、CSVファイルを含むフィールドが引用符で囲まれていることを確認してください。

import csv 
import pandas as pd 

df.to_csv(sep=',', encoding='utf-8', index=False, header=False, quoting=csv.QUOTE_ALL) 

また、あなたが\rを含んでいる可能性が高いフィールドだけを引用するquoting=csv.QUOTE_NONNUMERICを使用することができます。一つの方法は、すべてのフィールドをただ引用することです。

もう1つの方法は、\r\n（またはちょうど\r）に設定し、間接的に\rを含むフィールドを引用符で囲むことです。それを必要とするものだけ個々の「セル」が引用されているので、これが好まれることがあります

df.to_csv(sep=',', encoding='utf-8', index=False, header=False, line_terminator='\r\n')