1 初識爬蟲和request庫的安裝使用

pip install requests

import requests

#define requests url
url =
''#start get request
res =requests.get(url=url)
res.encoding=
'utf-8'
#get respond result
print
(res)
#print
(res.content)
# 二進位制的文字流
print
(res.content.decode(
'utf-8'))
#二進位制的文字流按照ytf-8的字符集轉化為普通字串
print
(res.text)
#獲取相應的內容
print
(res.headers)
#響應頭資訊
print
(res.status_code)
#請求狀態碼 200成功 404失敗
print
(res.url)
#請求的url位址
print
(res.request.headers)
#請求的頭資訊 'user-agent': 'python-requests/2.22.0', 直接就告知是python程式發出請求
爬蟲 python（二）初識request
from urllib.request import urlopen 傳送請求，獲取伺服器給的響應 url response urlopen url 讀取結果,無法正常顯示中文 html response.read 進行解碼操作，轉為utf 8 html decode html.decode 列印結...
python爬蟲利器 request庫
request庫比urllib2庫更為高階，因為其功能更強大，更易於使用。使用該庫可以十分方便我們的抓取。基本請求 r requests.get r requests.post r requests.put r requests.delete r requests.head r requests.o...
爬蟲request庫簡單使用
為什麼要學習requests，而不是urllib requests的底層實現就是urllib requests在python2和python3通用，法完全 樣 requests簡單易 requests能夠 動幫助我們解壓 gzip壓縮的 網頁內容 requests的作用 作 傳送 絡請求，返回相應資...