爬蟲練習之循環爬取網頁中所有連接(requsets同步)

驗證輸入的url是否可正常鏈接,沒法鏈接提示用戶再次輸入,正常鏈接則返回url自己 def url_get(): url = input("請輸入要爬取的首頁url:") try: # 作一個user-agent模擬瀏覽器發送請求,也能夠加入其它字段 kv = {'User-Agent':'Mozilla/5.0 (Windows NT 10.0;

>>阅读原文<<