Re: [SQL ] 大量LOG記錄架構選擇
※ 引述《OpenGoodHate (什麼東西什麼東西)》之銘言：
: 感謝P 大提供建議
: log 的項目只是一些機器記錄的參數
: (可以想像是Apache LOG 這樣，只是是一個人一秒一筆)
: 目前想到一個方法就是直接每個人每週或每月開一個文字檔寫入
: 然後再用LOG PARSER 去處理剩下的事
: 應該比較能讓架構單純化
: 機器打算租用標準A2
: 再定時把log 撈回本地端存放
: 這樣的預估量應該在初期是夠的
用回的好了..
你的做法很好，但是我建議可以全部放在同一個Log檔案
每天log rotate一次並且壓縮
編碼可以用
user_id, metric1, metric2, ....
這樣的好處是你的App不用開太多檔案
再來就是也比較方便將來分析統計
csv(或是tsv)的好處是很多分析軟體都支援
方便你以後分析或是import到DB, excel
以你的需求.. 甚至A1就可以了
sequential write其實超快的
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 118.163.46.230
※ 文章網址: https://www.ptt.cc/bbs/Database/M.1431415310.A.94B.html
※ 編輯: popcorny (118.163.46.230), 05/12/2015 15:27:43
討論串 (同標題文章)
本文引述了以下文章的的內容：
完整討論串 (本文為第 4 之 5 篇)：