データベースはバックグラウンドで保持されます

Question

私は辞書アプリケーションを開発しており、多くの外部ソースを使用してデータを収集しています。 このデータは、これらのソースから初めて収集されたものです。その後、そのデータをデータベースに保存し、そのデータベースからフェッチします。

私が直面している問題は、セット、カット、プットなどのいくつかの単語は100の意味と多くの例を持っています。このデータをすべてmysqlに永続させるには約10秒かかります。私はmybatisを使ってデータを保持しています。そしてそのために、応答時間が急上昇しています。このデータベースがなければ、ソースからフェッチした直後にデータを表示すると400-500msの応答が得られます。

私はバックグラウンドでデータを保持する方法を見つけようとしています。私はMVCパターンを使用しているので、DAOレイヤーは別です。

ダオ層のスレッディングを解決策として使用することをお勧めしますか？あるいは、カフカのようなメッセージングツールを使用して、指定された単語をバックグラウンドで保持するメッセージを送信する必要がありますか？他に何ができますか？

注：今はdbとしてMySQLを使用していますが、後でキャッシュするためにはおそらくredisを使用します。質問+さらにコメントの

Answer 1

私の世界の答え：

はMyBatisのforeachので一括挿入をしないでください。代わりに、ExecutorTypeReuseまたはBatch（Read the documentation）を使用して、ストアするオブジェクトのリストに対してJava反復でステートメントを実行する必要があります。取引について

、メインMyBatisの-config設定のXMLでは、環境設定：session = sessionFactory.openSession(); session.commit(); session.rollback();

のTransactionManagerタイプがにをマネージコードでトランザクションを管理するために

• のTransactionManagerタイプJDBCをコンテナを管理させてください。

さらに、新しいスレッドにデータを保存する時間がかかる間に、Webアプリケーションに応答を送信させることができます。