【Python爬蟲】：爬取58同城二手房的全部房產標題

咱們首先打開58同城的網站：
觀察網站的版面：

 

 發現全部的title都是以h3開頭，而且具備class爲「

property-content-title-name

」

所以咱們能夠編寫這樣的程序便可獲得整個版面的title，在程序當中使用Xpath表達式便可，使用起來很是方便：

import requests
from lxml import etree

#咱們此次是使用etree來獲取的全部二手房的title，也就是標題

url='https://bj.58.com/ershoufang/'
#cookie='lastCity=100010000; __zp_stoken__=ce26bZyQcLhoDK1A7M0RzPzMQEDJzHHpAQCJkUHtpSSFDSCkNeko0HBZxSywqeBxlHh8PIE4CLwgTSWsacwcdbEMNUBBzE2APASkfAktgOFskSn9HCTgkLmE7GFxecS8MGE4FGX99IHdsQHV5YQ%3D%3D; __c=1610949395; __g=-; __l=l=%2Fwww.zhipin.com%2F&r=https%3A%2F%2Fwww.google.com%2F&g=&s=3&friend_source=0&s=3&friend_source=0; __a=13532184.1600828409.1610683874.1610949395.205.23.3.205; Hm_lvt_194df3105ad7148dcf2b98a91b5e727a=1610082805,1610683875,1610949395,1610949407; Hm_lpvt_194df3105ad7148dcf2b98a91b5e727a=1610949407'
headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/85.0.4183.83 Safari/537.36',
}

page_text=requests.get(url,headers).text
tree=etree.HTML(page_text)#拿到的網頁，而不是局部的數據
li_list=tree.xpath('//h3[@class="property-content-title-name"]/text()')
for i in li_list:
    print(i)

打印出來結果以下：

北街家園七區 南北通透大兩居 看房有鑰匙
緊鄰大賣場，業主誠心出售，房子很是乾淨，剛需  
（新上！急售）百環家園高層觀景大兩居 主次分離 雙生活陽臺
海淀幸福裏~北清路邊上~ 智能精裝科技住宅~全明格局~新房
模式口南里 南北通透 明廚明衛 滿五年  
總價200萬 滿五年 大興黃村東新鳳小區,南北通透 兩居
樓層好，視野廣，康居南區圓您置業夢想！
VR看房~邑上原著~中等樓層~新格局~陽光充足
迎風六裏 低樓層 南北通透兩居室 明廚明衛戶型
密雲區 密西   獨立兩居 2室2廳1衛 92.0平米
東方太陽 城 萬晴園 眼鏡戶型精裝3居 無個稅 採光好
澗橋泊屋館 5室3廳4衛 帶飄窗 兩房朝南
清緣裏 兩居室  低總價  小區出行方便 生活配套齊全
東方太陽 城 琴湖園 精裝雙臥向陽 頂層    前面無遮擋
精裝修 電梯房 90平 2室2廳業主 誠心出售
金融街片區 緊俏房源 510萬雙證齊全 隨時過戶
海怡莊園東區！電梯房 觀景樓層  小區環境優美 獨立兩居
首付30住兩居空氣清新採光好環境優美澗橋山~2室2廳~86.
國風北京 3室2廳2衛 客廳帶陽臺 主臥朝南
佣金1.5 長安新城 中間位置 南北兩居 業主信任有鑰匙
西四環 四季青板塊 和泓性價比三居出售 主臥客廳朝南隨時看房
光大   3室2廳2衛 品質小區 兩房朝南
燕郊南城核心夏威夷藍灣緊鄰地鐵現房即買即住採光好可買可
佣金1.2 深耕北京12年 璽萌麗苑 南向正規一居 滿五  
韓村河雅苑 三層 精裝修 三居室 129.89平 滿五年
佣金1.2，深耕北京12年 辛店小區 2室 87.97 簡裝
漫香林五期 精裝修兩居室 邊戶全明戶型！
滿五  住房 水關新村 65平 265萬 誠心出售 價格可議
新上房源，小區門口位置，  滿五年，僅契稅，戶型方正
(特惠）海淀 首付300萬 華潤開發新房 精裝修 雙軌交匯
佣金1個點  華僑村 燕華苑222平 南北向 高層1200萬
燕山迎風三裏小區兩居室誠心出售
國貿CBD 1室0廳0衛 140.0平米 549.00萬元
世紀城觀山園 南北通透完好點 園區中心 採光無遮擋 私密性高
精裝修， 南北通透， 高塔小區， 5層不是頂，  滿五  
佣金1.2 深耕北京12年 富強西里 3室 144.98
密雲區(密雲縣) 2室1廳1衛 90.0平米
東方太陽 城 精裝3居 一層    視野開闊 隨時看房
天通苑回龍觀 2室1廳  98 平 性價比高的
3室1廳 865萬 電梯房 甘家口小區 87平 樓層好 視野
竇店明峻嘉園電梯洋房150萬 南北通透 中間樓層 看房方便
西山美廬新出 精裝半山獨棟別墅 純邊戶大院子 看房隨時
海淀萬柳世紀城三期垂虹園 4室2廳2衛 客廳主臥朝南 帶明衛
滿五  商品房 2005年建成 3梯10戶 雙陽臺 無遮擋
果園西里小區 精裝 2室 廳截三居 103.0平米
新上 南北通透兩居室 門口位置僅契稅 首付70萬看房方便誠售
戶型方正  精裝別墅   朝南客廳設計   誠心出售看房隨時
必看好房 世紀城三期觀山園 3室2廳2衛 兩房朝南 品質小區
北七家 3室1廳3衛 160.0平米 600.00萬元
東壩區域精裝洋房  現買現住視野好 住着舒心  寬敞大器
北街家園七區 南北通透大兩居 看房有鑰匙
南邵國惠村2室1廳1衛1廚1陽臺
朝陽公園   4室2廳  樓層好 視野無遮擋  豪華裝修
燕郊地鐵旁 天洋城業主急售 精裝修 滿五   省稅
四號線清源路地鐵口 南北通透兩居室 滿五   中樓層配套成熟
新上 湯泉逸墅 一層雙臥室南 三居室 明廚明衛 看房有鑰匙
中間層把東邊戶 三面採光 品質小區 觀綠化帶 臨金源地鐵
區域推薦明星樓盤 滿五   誠心出售 高層採光視野無遮擋
東城區）長安街北）大  500平）客廳層高4.5米)看房隨時
340萬 西源裏 3室2廳 滿二  住房 精裝修 居家自住
密雲區(密雲縣) 2室1廳1衛 87.0平米
密雲區(密雲縣) 3室2廳2衛 107.0平米
必看好房 世紀城三期觀山園 3室2廳2衛 兩房朝南 品質小區
  住房 精裝修 88平 160萬 電梯房 嘉都國際 樓層好
中冶藍城東區緊鄰城鐵 適合各類   免裝修 隨時看房
亦莊 採育育新   南北大一居 少稅 自住房 精裝
密雲區(密雲縣) 1室1廳1衛 53.0平米
必看好房 世紀城三期春蔭園 2室2廳1衛 帶車庫 品質小區
川  區~經典兩居室~兩臥朝陽~採光超棒~剛需主選~出行方便
石橋小區~朝向南北~舒適2居室~素質住戶~誠意出售
南菜園北二區 3室2廳1衛 94.0平米 165.00萬元
提早預定，可看實房，城市別墅，精裝現房，公園地產
佣金只收0.5 鼓樓東區 精裝雙陽3居 採光好 5  到  
急售華堂獨棟別墅，緊挨球場，850萬，滿2年，能  。
大柳樹13號院2居南北向滿五年無稅業主誠意急售
含暉苑  低樓層  南北朝向 三面採光 邊戶 誠心出售
房山區中建京西印玥2室2廳1衛1廚1陽臺
雲秀  ~一層   ~2室2廳2衛 94.0平米
大興南23萬一套，現房車位菜地都有，商業完善~外地人能夠
世紀城三期觀山園 3室2廳2衛 兩房朝南 品質小區
世紀城三期翠疊園眼鏡三居  一個地下25平米儲藏間有一個車位
(特惠）海淀 首付300萬 華潤開發新房 精裝修 雙軌交匯
世紀城三期春蔭園 4室2廳2衛 品質小區 經典實用
北源裏~2室1廳~57.00平米  精裝修 看房方便
緊按通州獨棟別墅，首付290萬，外地不 戶口，70年，能  
VR看房~邑上原著~中等樓層~新格局~陽光充足
魯藝上河村三期 5室3廳4衛 客廳朝南 格局方正
滿五  住房 水關新村 65平 265萬 誠心出售 價格可議
佣金1.2，深耕北京12年 辛店小區 2室 87.97 簡裝
新小區都麗華府南樓！視野好毛坯隨意裝修！總價低有鑰匙兩衛
密雲區(密雲縣) 2室1廳1衛 59.0平米
房山南大街小區  首付33萬  2室1廳  南北通透隨時看
天地百分之0.9 東關二區 大三居室 南北通透 精裝修 誠售
府前東街9號院 寧靜安詳 大三居 225萬
密雲區(密雲縣) 2室1廳1衛 90.0平米
通州珠江.四季悅城 總價140萬起復式使用面積150平 精裝
急賣園丁小區，現代精裝，三居南北通透，拎包入住，價格可議
（價格好談電話說）稅費15萬 （純獨棟現房）  350
黃平路8號院 二層 南北通透 業主靠譜 價格可談 看房預定
看過來 眼睛看好了  一期房源 老業主換房出售 不要等抓緊看
首開緹香郡（新房源）精裝修（拎包住）業主換房急售 位置好
（年末特價）西五環，鄰地鐵，精裝墅質洋房，超大面寬，可公積金
格蘭二期北區~三陽開泰戶型~電梯觀景房 ~
密雲區(密雲縣) 1室1廳1衛 70.0平米
君山獨棟別墅，精裝修， 5室4廳4衛 398.0平米
海淀地鐵新房 清華一站 式教育 少有小戶型帶新風地暖
HR3URSP杏花西里 精裝修 採光好 周邊商圈成熟
華潤橡樹灣 雙陽眼鏡戶型3室2廳2衛 139平米 環境優美
（年末特價）智能精裝，獨門獨戶，帶院子，私家電梯，新風空調
壹號院隨時可看  雙主臥朝南  大三居室 一梯一戶帶保姆間
C21星河灣745平全新豪華大複式! 一天未住 價格可談
清緣裏 東西通透明廳戶型 經典兩居 好房等您來哦
福成五期 南北通透 兩居室  全天採光
  小區 獨立兩居可作廳截三居 無稅 業主急售
南北通透 5室2廳 萬城華府尚園 滿五  住房 樓層好 視野
開盤特惠 良鄉新房 恆大御峯 全名三居 一梯兩戶 超低總價
427平 滿五 京基鷺府 南北通透 精裝修 看房方便 有鑰匙
中層朝南一居 大陽臺採光好 滿5年一套 臨新世界崇文門磁器口
學府  六層 2室2廳2衛 89.0平米五年  
北京五環總價81萬 外地可買 地鐵三站潘家園四站工