請教下百度統計一類分析服務的資料庫設計

來源:互聯網
上載者:User
最近啟動了一個新項目,類似於百度統計、友盟一類的資料分析產品。

產品中大量使用count,groupby一類的彙總查詢(按日期組織PV,UV,銷售額一類的),現在page_visit表資料量過百萬後伺服器已經稍顯吃力,搭檔的建議是增加緩衝表,就是每天把使用者的資料都算一遍,使用者查詢時直接從緩衝表中取資料。但是緩衝錶帶來的額外工作量會比較大,維護成本也高。

所以想請教下百度統計、友盟一類的資料庫是如何設計的?

部分表結構 page_visit表: id,storeID,productID,title,ip,country,city,url,referUrl,browser,createTime,os... 每一次訪問都會插入一條新的記錄。

store表: id,userID,name,email...

product表: id,storeID,title,price,size,color...

回複內容:

最近啟動了一個新項目,類似於百度統計、友盟一類的資料分析產品。

產品中大量使用count,groupby一類的彙總查詢(按日期組織PV,UV,銷售額一類的),現在page_visit表資料量過百萬後伺服器已經稍顯吃力,搭檔的建議是增加緩衝表,就是每天把使用者的資料都算一遍,使用者查詢時直接從緩衝表中取資料。但是緩衝錶帶來的額外工作量會比較大,維護成本也高。

所以想請教下百度統計、友盟一類的資料庫是如何設計的?

部分表結構 page_visit表: id,storeID,productID,title,ip,country,city,url,referUrl,browser,createTime,os... 每一次訪問都會插入一條新的記錄。

store表: id,userID,name,email...

product表: id,storeID,title,price,size,color...

緩衝表,讀和寫在不同的表上。轉存的指令碼不難寫應該~

  • 聯繫我們

    該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

    如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

    A Free Trial That Lets You Build Big!

    Start building with 50+ products and up to 12 months usage for Elastic Compute Service

    • Sales Support

      1 on 1 presale consultation

    • After-Sales Support

      24/7 Technical Support 6 Free Tickets per Quarter Faster Response

    • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.