PRIMARY_ID> lastProcessedIdを常に照会してデータベーステーブルを「監視」するのは悪いですか

Question

私はElasticSearch（フルテキスト検索）でMySQLテーブルのインデックスを作成しています。作成時に新しい行を送信する代わりに、そのテーブルの新しいレコードに対してN秒（約30秒）ごとにSQLクエリを実行します。

SELECT * FROM myTable where id > lastProcessedId 

私の質問：私たちは、最後に処理されたレコードのID（AUTO_INCREMENT）を格納するなど、クエリを発行していることをやる、これはこれを処理するための良い方法ですか？重大な欠点はありますか？より良い選択肢はありますか？

また、ユーザーの好み（Facebookのスタイル）を扱うために同じアプローチを使用する予定でした。 N秒ごとに最新の「好き」を取得して処理し、各ユーザーのタイムラインを更新するSQLクエリを実行します。

私たちは古いコードベースを混乱させるのを避けるために、このようにしています。しかし、私は毎秒このタイプのクエリーを発行することにはあまり慣れていません。

このソリューションに関するご意見や問題はありますか？

Answer 1

高価に聞こえますが、私は他のアプローチを考えます。

1. 古いコードを変更して、挿入時に索引を付けます。私はそれが恐ろしいかもしれないことを知っていますが、それはそれが悪いですか？ :)
2. 何とか再インデックスプロセスを開始する挿入トリガーを作成します。私はあなたがこれをどのように構築するためのオプションがたくさんあると思います。

チェックアウト、http://www.roseindia.net/sql/trigger/mysql-trigger-after-insert.shtml

Answer 2

それは少し高価だが、それが唯一の30秒ごとだ場合、それは痛みを伴う得るために始めたまでは率直に言って、私はそれをそのようにしてください。

データベースを介してステージングするのではなく、データを後で取り込んで処理する場所があります。シリアライズされたコピーをファイルに追加したり、30〜60秒ごとに新しいファイルを作成したり、スクリプトで前の未処理ファイルを処理したりするなどの単純な操作を使用できます。同様に、他の種類のキューに入れてから、実行することができます。