Splash動態頁面爬蟲

Splash是一個Javascript渲染服務。它是一個實現了HTTP API的輕量級瀏覽器，Splash是用Python實現的，同時使用Twisted和QT。Twisted（QT）用來讓服務具備異步處理能力，以發揮webkit的併發能力。 scrapy-splash利用Splash將javascript和Scrapy集成起來，使得Scrapy能夠抓取動態網頁。 地址：http://scrapy-

>>阅读原文<<