Python3 Scrapy框架學習四:爬取的數據存入MongoDB

1. 新建一個scrapy項目: 2.使用PyCharm打開該項目 3.在settings.py文件中添加如下代碼: #模擬瀏覽器,應對反爬 USER_AGENT = 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/55.0.2883.87 Safari/537.36' #解決字符
相關文章
相關標籤/搜索