ユーザーがサイト上でデータをインポートできるようにする必要があります(mysqlデータベース内)。ログインしたすべてのユーザーは、ファイルからデータベースにデータをインポートし、サイト上でそれらのデータベースと作業できます。データのインポートには時間がかかり、データベースへの負荷も高くなります。 インポートをキューに入れる方法を教えてください。したがって、データは1つのオンラインでインポートされますが、定期的にデータベースに書き込まれるデータをキューに入れます。 ありがとうございます。サイトのユーザーがファイルからデータベースにデータをインポートする
答えて
私の提案は、.CSVファイルをアップロードし、メッセージをキューに投稿することです(または、[インポート]ボタンをクリックするなどの他のイベントでメッセージを投稿する)ことをお勧めします。この方法で、すぐに戻り、「お待ちください」などのメッセージを表示することができます。その後、インポートが完了し、データベースが更新されると、HTMLページが更新され、適切なステータスが表示されます。サーバーやデータベースの負荷に応じて、同時に1つまたは複数の同時インポートを実行できます。
はい、この場合、インポートを処理するcronのcli phpのスクリプトを使用する価値はありますか?私は小さな部分でファイルをインポートすると同時に、ログイン遅延なしでインポートすることが可能です。私は定期的にデータをインポートするスクリプトをより良くする方法を知っていますか?私はZend Frameworkを使用しています.Zend_Queueがそのようなタスクで問題がなければ面白いです(それはデータベースに別の接続が必要なように思えます。 – Oleg
あなたが使用するキューマネージャに基づいて、キューマネージャはキューに新しいメッセージがあるとき(つまり、処理前に遅延がない)、クライアントを開始するように設定できます。 Zend_Queueがこのような処理を実行できるかどうかはわかりません。 –
私はZend_Queueがそれを行うことはできないと思います。 – Oleg
おそらくinsert delayedが役に立ちます。マニュアルから:
DELAYED INSERT を使用してのもう一つの大きな利点は、多くの クライアントからの挿入が一緒にバンドルされていると は、1つのブロックに書かれたということです。これは多くの別個の 挿入物を実行するよりもずっと速く です。
- 1. txtファイルからSQLデータベースにデータをインポート
- 2. データベースからSharepointにユーザーをインポートする
- 3. Rails 5 - xlsファイルからデータベースにデータをインポートする方法
- 4. Amazon Web ServicesにCSVファイルからデータをインポートするRDS MySQLデータベース
- 5. CSVファイルからデータベースにデータをインポートする方法
- 6. MS AccessのWebサイトからデータをインポート
- 7. jsonオブジェクトを含む.jsファイルからmysqlデータベースにデータをインポート
- 8. Joomla! - CSVファイルからユーザーをインポートする
- 9. データベースからGemFireにデータをインポート
- 10. geonames.orgデータベースからMySQL DBにデータをインポート
- 11. Microsoft WorksデータベースからSqlServerにデータをインポート
- 12. xmlファイルから2つのテーブルにデータをインポートするMySQLデータベースの外部キー
- 13. csvファイルをレールからOracleデータベースにインポート
- 14. MySQLデータベースからiOSアプリケーションのデータをインポート
- 15. Excelファイルからデータをインポート
- 16. Pythonの別のデータベースからデータベースにデータをインポート
- 17. XMLファイルからSQLデータベースへのXMLデータのインポート
- 18. WARCファイル(WebArchive)からデータをインポートする
- 19. あるサイトから別のサイトにテーブルをインポートする
- 20. データベース内のテーブルからレールモデルにデータをインポートする方法
- 21. ExcelからEntity Frameworkのデータベースにデータをインポートする
- 22. 普通のmysqlデータベースからWordPressにデータをインポートするPHPコード
- 23. ExcelからC#のデータベースにデータをインポートする
- 24. Solrデータのインポート - データベースからインポートするときにInvalidConnectionAttributeExceptionを取得します。
- 25. SQLファイルまたはExcelファイルからRails経由でデータベースにデータをインポート
- 26. テキストファイルからデータベースにデータをインポートするには?
- 27. .avroファイルからハイブテーブルにデータをインポート
- 28. ICSファイルからGoogleカレンダーにデータをインポート
- 29. Drupal 7 - サイトのtemporyディレクトリからノードのファイルフィールドにファイルをインポート
- 30. 外部FTPサイトからCSVファイルをインポートする
現在、どのように処理していますか?あなたのデータはXML、CSVをインポートしていますか? – Dai
ファイルをディレクトリに格納し、キューデータベースに追加してから、次のキューに入れられたアイテムを定期的に取得してプロセスを実行させることができます。 –
.csvファイルのデータは、1つのデータベースに書き込まれるのではなく、複数の関連するテーブルに書き込まれます。したがって、データをインポートするには、ファイルから行を読み込み、データを書き込む複数のSQL文を作成する必要があります。INSERT INTO main_tabelのように見えます。 LASTINSERTID();このIDの関連テーブルに挿入します。 – Oleg