http(2)

如何在 Java 中使用 HTTP 代理，代理也是爬蟲技術中的重要一項。你如果要大規模的爬別人網頁上的內容，必然會對人家的網站造成影響，如果你太拼了，就會遭人查封。要防止別人查封我 們，我們要麼將自己的程序分佈到大量機器上去，但是對於資金和資源有限的我們來說這是很奢侈的；要麼就使用代理技術，從網上撈一批代理，免費的也好收費的 也好，或者購買一批廉價的 VPS 來搭建自己的代理服務器。關於如何搭建自

>>阅读原文<<