2016-10-24 9 views
0

私は電子メールのリストを含むテーブルに列を持っています。私はテーブル内の同様の電子メールのリストから最新の電子メールを保持する必要があります。たとえば。次のようにテーブルに要素が含まれている場合:PostgreSQLのテーブルの列から同様のレコードを削除するには

+--------------------------+------------------------+ 
|   Email   |  Received at  | 
+--------------------------+------------------------+ 
| [email protected]  | 2016-08-04 20:56:53+00 | 
| [email protected]   | 2016-08-04 20:56:52+00 | 
| [email protected]   | 2016-08-04 20:56:51+00 | 
| [email protected] | 2016-08-04 10:56:53+00 | 
| [email protected]   | 2016-08-04 10:56:52+00 | 
| [email protected]   | 2016-08-04 06:57:32+00 | 
| [email protected]  | 2016-08-04 06:57:46+00 | 
| [email protected] | 2016-08-04 13:54:42+00 | 
+--------------------------+------------------------+ 

次のように最終的な出力は次のようになります。

+--------------------------+------------------------+ 
|   Email   |  Received at  | 
+--------------------------+------------------------+ 
| [email protected]  | 2016-08-04 20:56:53+00 | 
| [email protected] | 2016-08-04 10:56:53+00 | 
| [email protected]  | 2016-08-04 06:57:46+00 | 
| [email protected] | 2016-08-04 13:54:42+00 | 
+--------------------------+------------------------+ 

以下のリンクを使用して、私はお互いに類似している電子メールを見つけることができました。それらをグループ化することは次のステップです。私はそれを理解できませんでした。

Finding similar strings with PostgreSQL quickly

UPDATE:あなたの全体のデータセットに関するわからない

CREATE EXTENSION pg_trgm; 

DROP TABLE IF EXISTS roshan_email_list; 

CREATE TEMPORARY TABLE roshan_email_list AS (
SELECT EXTRACT(MONTH 
FROM received_at) AS MONTH, EXTRACT(YEAR 
FROM received_at) AS YEAR, 
email 
FROM users 
group by month, year, email 
); 

CREATE INDEX roshan_email_list_gist ON roshan_email_list 
USING gist(email gist_trgm_ops); 

SELECT set_limit(0.75); 

-- The below query gives the similarity between emails 
WITH email_similarity AS 
(
SELECT similarity(n1.email, n2.email) AS sim, 
n1.email AS email, n2.email AS similar_email, 
n1.month, n1.year 
FROM roshan_email_list n1 
JOIN roshan_email_list n2 ON n1.email <> n2.email AND n1.email % n2.email AND n1.month = n2.month AND n1.year = n2.year 
WHERE n1.year = 2016 
ORDER BY sim DESC 
) 
SELECT e.sim, e.email, u.received_at, 
e.similar_email, e.month, e.year 
FROM email_similarity e 
INNER JOIN callinize.users u ON e.email = u.email; 
+1

類似のものを見つけるために使用するクエリを表示してください(** [編集] **あなたの質問) –

答えて

0

: は、私がコメントで要求されるように、ここでの電子メールとの間の類似性を与えるのコードを追加しました。

with data as (
    select 
    split_part(email, '@', 1) as first, 
    split_part(split_part(email, '@', 2), '.', 1) as second, 
    received_at, 
    email 
    from emails 
), 
ndata as (
    select *, 
    row_number() over (partition by first, second order by received_at desc) 
    from data 
) 
select 
    email, received_at 
from ndata 
where row_number = 1; 
+0

それは良い考えです。しかし、私はそれが動作しない私のテーブルにいくつかのエントリがあることに気づいた。私はそれに応じて質問を更新しました。 –

+0

私はあなたがストアドプロシージャを使用する必要があると思います。単なるクエリでは実現可能ではないようです。 – Nikhil

関連する問題