大きなMySQLテーブルを比較する

Question

約60.000行と約60列の2つ（またはそれ以上）のテーブルを比較する必要があります。

これらの表には、クエリを実行する2つの値があります。クエリの目的は、TABLE_Aに存在する行をカウントすることですが、行の2つの値に基づいてTABLE_Bには存在しません。

私は、次のクエリを実行しました：

SELECT id 
FROM table_a ta 
WHERE NOT EXISTS (
    SELECT id 
    FROM table_b tb 
    WHERE ta.value1=tb.value1 AND ta.value2=tb.value2 
) 

としては、私は上記のコードとその上にいくつかのバリエーションを試してみた、と述べました。しかし、このクエリを実行するには、完了するまでに時間がかかります。私は10秒以内に実行されるソリューションを見つけることを願っています。

次のクエリは、私が試した、とその私が働いていたと思った：

SELECT value1, value2 
FROM (
    SELECT ta.value1, ta.value2 
    FROM table_a ta 
    UNION ALL 
    SELECT tb.value1, tb.value2 
    FROM table_b tb 
) result 
GROUP BY value1, value2 
HAVING COUNT(*) = 1 
ORDER BY value1 

コードは私に2つのテーブル間のすべての違いを示します。したがって、TABLE_AではvalueXが存在しますが、TABLE_Bでは存在しない場合はvalueXが表示され、その逆もあります。

要するに、行の2つの値に基づいてTABLE_Bに存在しないTABLE_Aからすべての行を取得したいとします。

誰かが助けてくれることを祈っています。

Answer 1

いくつかの試行錯誤の末、私は2番目のコードブロックを改良しました。私は結果をさらにフィルタリングするために私のテーブルに追加フィールドがあることに気づいた。

SELECT date, value1, value2 
FROM (
    SELECT date, value1, value2 
    FROM (
     SELECT ta.date, ta.value1, ta.value2 
     FROM table_1 ta 
     UNION ALL 
     SELECT tb.date, tb.value1, tb.value2 
     FROM table_2 tb 
    ) filter 
    GROUP BY value1, value2 
    HAVING COUNT(*) = 1 
) result 
WHERE date='YYYY-MM-DD' 

このコードは、結果を4秒以内でフィルタリングします。

とにかく、ありがとうございました。

Answer 2

なぜ結合を使用しないのですか？

/* Create a table called NAMES */ 
CREATE TABLE NAMES(Id integer PRIMARY KEY, Name text, LastName text); 
CREATE TABLE OTHERNAMES(Id integer PRIMARY KEY, Name text, LastName text); 

/* Create few records in this table */ 
INSERT INTO NAMES VALUES(1,'Tom','Riddle'); 
INSERT INTO NAMES VALUES(2,'Lucy','I love'); 
INSERT INTO NAMES VALUES(3,'Frank','Frankly'); 
INSERT INTO NAMES VALUES(4,'Jane','Austen'); 
INSERT INTO NAMES VALUES(5,'Robert','Downey'); 

INSERT INTO OTHERNAMES VALUES(2,'Lucy','I love'); 
INSERT INTO OTHERNAMES VALUES(3,'Frank','Frankly'); 
INSERT INTO OTHERNAMES VALUES(4,'Jane','Austen'); 
INSERT INTO OTHERNAMES VALUES(5,'Robert','Downey'); 

select * from NAMES 
LEFT JOIN OTHERNAMES on 
    NAMES.Name = OTHERNAMES.Name 
    AND Names.LastName = OTHERNAMES.LastName 
where OTHERNAMES.id is null 

あなたが右のテーブルに存在しないLEFT JOINアイテムはどこでフィルタリングすることができ、ヌルエントリに置き換えられます使用している場合は、オンラインhttp://sqlfiddle.com/#!9/640c53/1

それを参照してください。

あなたの60.000データベースの効率はわかりませんが、これは通常、私のトリックです。