04 python 爬蟲cookie的處理

2021-10-10 12:31:38 字數 2525 閱讀 9306

爬蟲無法像瀏覽器一樣自動訪問和傳送cookie,需要我們手動處理

import requests

#得到cookie

('獲取cookie失敗:\n'

.format

(err)

)#使用cookie

('獲取cookie失敗:\n'

.format

(err)

)#使用cookie

defget_data()

: cookie = login(

) headers =

res = requests.get(url=get_data_url, headers=headers)

print

(res.text)

import requests

#得到cookie

('獲取cookie失敗:\n'

.format

(err)

)#使用cookie

defget_data()

: cookie = login(

) headers =

res = requests.get(url=get_data_url, headers=headers)

print

(res.text)

使用seesion儲存cookie,不再需麻煩的cookie,只需要把請求交給session就可以了

#初始化session

session = requests.session(

)#以後請求直接用session請求就可以了

session.get(

)seesion.post(

)

04 Python檔案操作

f open 我的檔案.txt r encoding utf8 開啟乙個檔案 讀模式 f.close 關閉檔案解釋 寫 過程中,很容易忘記關閉檔案,所以出現了with語句。with open 我的檔案.txt r encoding utf8 as file 自動關閉檔案 data file read...

04 python條件控制語句

語法 if 條件表示式 weight 180if weight 160 print 你體重有點超標了 print 你該 了 a input 請輸入您的密碼 語法 input語句 a int input 請輸入您的密碼 if a 123456 print 這是高手 語法 if else語句 b int...

python爬蟲免登入 爬蟲使用cookie免登陸

由於前程無憂上崗位投遞記錄只保留兩個月,想記錄下。程式 放在github 對於怎麼獲取登陸後的頁面,有兩種思路使用賬號,密碼登陸,如果該 登陸系統簡單的話,沒有驗證碼啥的,有驗證碼的話,可以使用圖形識別庫 使用cookie繞過登陸頁面cookie cookie 複數形態cookies 中文名稱為 小...