大規模データベーステーブルのグループ化と更新

Question

私は1億1600万行の巨大なテーブルを持っています。テーブル構造はentryid(varchar), dater(date), region(char), detail(varchar), views(int)であり、最初の4つの列は主キーとして一緒になっています。私は、次のような処理をしたい：

1. detailはgoogleためLIKE "%.google.%"を使用して、例えば、同じドメインからのグループにそれらの行を私が欲しいなどwww.google.com、www.google.ca、www.google.uk、www.facebook.com、facebook.com、などのURLを含んでいますfacebookの場合はLIKE "%.facebook.%" OR LIKE "facebook.%"で十分です。しかし、行を更新する場合は、viewsを合計するためにON DUPLICATE KEY UPDATEを使用する方法重複するキーがあるかもしれませんか？そして、LIKE以外の速い方法がありますか？

2. region列を削除して行をグループ化し、viewsを合計して新しい表に挿入したいとします。 1つのコマンドでそれを行うには？

3. 行をグループ化して（月間にviewsを更新したい）、

Answer 1

ごと行、詳細フィールドはwww.something.comようになっていることを仮定して、MYSQLのために、これを試してみてください。

SELECT 
    MONTH(dater), 
    SUBSTRING_INDEX(SUBSTRING_INDEX(detail, '.', 2), -1) as url, 
    sum(views) 
from table 
group by 
    MONTH(dater), 
    SUBSTRING_INDEX(SUBSTRING_INDEX(detail, '.', 2), -1) 

それとも、それは少しクリーナーを見えるようにサブクエリを使用することができます。

SELECT mth, url, sum(views) from 
(
SELECT 
    MONTH(dater) as mth, 
    SUBSTRING_INDEX(SUBSTRING_INDEX(detail, '.', 2), -1) as url, 
    views 
from table) subq 
group by 
    mth, url