Hadoop綜合大做業

Hadoop綜合大做業 要求：

1.用Hive對爬蟲大做業產生的文本文件（或者英文詞頻統計下載的英文長篇小說）詞頻統計。

我下載了一篇英文小說來進行詞頻統計分析。

首先啓動hadoop

文件上傳到hdfs

 

啓動hive

建立小說表，並導入數據

用HQL進行詞頻統計，結果放在表word_count裏

查看統計結果

2.用Hive對爬蟲大做業產生的csv文件進行數據分析，寫一篇博客描述你的分析過程和分析結果。

用excel放入hive的sh文件

正常輸出的查看信息