大文件日誌快速解析入庫 - load data

100w行日誌 由左到右值分別是 book_id |  menu_id | userid 我需要每天每個用戶讀了多少本書（不重複）多少章節，以及每本書有多少章節被閱讀，以及每個章節的pv或者uv 轉成這樣的結構存儲  a、一條條解析，每條更新一遍where menuid 和booid的記錄的pv和uv值   b、一行行讀取，將全部值入庫到redis並在redis計算出pv和uv，最終讀取完以後sh

>>阅读原文<<