Python爬蟲入門 5 爬取小豬短租租房資訊

2021-08-13 15:00:08 字數 502 閱讀 6176

小豬短租是乙個租房**,上面有很多優質的民宿出租資訊,下面我們以成都地區的租房資訊為例,來嘗試爬取這些資料。

小豬短租(成都)頁面:

按照慣例,先來爬下標題試試水,找到標題,複製xpath。

多複製幾個房屋的標題 xpath 進行對比:

//*[@id="page_list"]/ul/li[1]/div[2]/div/a/span

//*[@id="page_list"]/ul/li[2]/div[2]/div/a/span

//*[@id="page_list"]/ul/li[3]/div[2]/div/a/span

瞬間發現標題的 xpath 只

python爬蟲 爬取小豬網的租房資訊

pycharm簡介 pycharm是一種python ide,帶有一整套可以幫助使用者在使用python語言開發時提高其效率的工具,比如除錯 語法高亮 project管理 跳轉 智慧型提示 自動完成 單元測試 版本控制。此外,該ide提供了一些高階功能,以用於支援django框架下的專業web開發。...

爬蟲專案1 爬取小豬短租資料

看了這個大神的部落格 爬蟲專案合集,自己也動手實踐一下 請求 requests 解析 xpath 非常簡單,直接放 import requests from lxml import etree source url 以北京地區為例 headers 請求頭比較簡單,如果被識別可以換為更複雜的 多加幾個...

Python 爬蟲爬取網頁

工具 python 2.7 import urllib import urllib2 defgetpage url 爬去網頁的方法 request urllib.request url 訪問網頁 reponse urllib2.urlopen request 返回網頁 return response...