MySQLがファイルをタブを無視して読み込みます

Question

私はポイントデータでいっぱいの20GBファイルを持っています。データが正しくエクスポートされておらず、全体にタブスペースがあります。私が意味することは、このファイルはこのようなものです

POINT( -38.071489872015  140.99467884981), 
POINT( -38.071489872015  140.99525003481), 
POINT( -38.071489872015  140.99582121982), 
POINT( -38.071100465759  140.99147345891), 
POINT( -38.071100465759  140.99204464087), 

最初と最後のタブスペースを無視する方法はありますか？

は

私の現在の負荷データのスクリプトが

LOAD DATA INFILE 'C:/ProgramData/MySQL/MySQL Server 5.7/Uploads/import.txt' 
INTO TABLE tblImport 
LINES TERMINATED BY ',' 
(@pointData) 
SET 
pointData = GeomFromText(@pointData); 

ですが、私はエラー

[Err] 3037 - Invalid GIS data provided to function st_geometryfromtext. 

おかげ

Answer 1

sedは、テキストデータを操作するための非常に効率的なツールになってしまいます。インポートが失敗した場合は、クリーニングしてmysqlにパイプするのではなく、クリーンデータセットを保存することもできます。

20行をきれいにする

sed $'s/\t*//g' point_data.sql | head -n 20 > point_data_no_tabs_short.sql 

でそれを試してみてはあなたが期待するものを手に入れることを確認してください。

それが動作する場合は、インプレースファイル全体清掃：

sed -i.bak $'s/\t*//g' point_data.sql 

または洗浄コピー作成：

sed $'s/\t*//g' point_data.sql > point_data_no_tabs.sql