JAVA爬取亞馬遜的商品信息

在程序裏面輸入你想爬取的商品名字,就可以返回這件商品在亞馬遜搜索中都所有相關商品的信息,包括名字和價格。 解決了在爬取亞馬遜時候,亞馬遜可以識別出你的爬蟲,並返回503,造成只能爬取幾個頁面的問題。 除此之外亞馬遜網頁代碼寫得非常的亂啊(可能是我個人問題?),要想提取裏面的信息非常麻煩。 純JAVA編寫,用的都是java自帶的庫。 先展示一下效果圖: 商品頁面:   爬取的信息頁面(消除重複了):
相關文章
相關標籤/搜索