唐詩分析程序（爬蟲）（一）

一、項目簡介 唐詩分析程序主要通過抓取互聯網上的唐詩，然後進行數據清洗，存儲，數據分析，輸出報告。 二、意義 瞭解數據分析的基本流程 熟悉數據分析方法 鍛鍊應用技術解決問題的能力 三、數據來源 古詩文網https://www.gushiwen.org/  四、功能 數據採集、清洗、存儲 五、技術 Stream流處理 文本分詞和解析（ansj） 多線程 網頁解析工具（HTMLunit） 數據庫和JD

>>阅读原文<<