mysqlから.csvファイルを複数の関連テーブルに効率的にインポートする

Question

ユーザがmysqlでデータをインポートする方法を教えてください。 問題は、通常、データを複数の関連テーブルに挿入する必要があることです。 severl 10sまたは100s of lineのインポート.csvをインポートするには時間がかかり、データベースに大きな負荷がかかります。今私は.csvを解析し、insetsを生成します（関係するテーブルにattrributesを設定する必要がある場合は複数の挿入があります）。 このようなことをどうやってやっていますか？ サーバにファイルをロードして、サーバに定期的にデータを挿入することがありますか？ すべてのアイデアは高く評価されています。 ありがとうございます。

Answer 1

このデータをすべて実際に挿入する必要がある場合は、選択肢があまりないと思います。

私は、アプリケーションとデータベース間のラウンドトリップの回数を減らすために、1つのINSERTで挿入する複数の行を使用することをお勧めします：

INSERT INTO mytable (....) 
VALUES (....), 
     (....); 

あなたが最初にデータを挿入する場合は、あなたが作成することができますすべてのデータが挿入された後のインデックスですが、もちろんオンラインで行っている場合（つまり、挿入プロセスが他のオペレーションと同時に実行されている場合）、すべてのプロセスでインデックスが共有されるため、インデックスを作成できません。