Python爬取需要登陸的兩種方法

2021-10-01 16:47:49 字數 1181 閱讀 4860

爬取微博某些內容需要登陸,整理兩種方法【不知道對不對】

def

gethtmltext

(url)

: cookie=

'******xx'

headers =

try:

r = requests.get(url, headers=headers,timeout=

30,proxies=

)#r = requests.get(url, headers=headers,timeout=30,proxies=get_random_ip(ip_list))

r.raise_for_status(

) r.encoding =

'utf-8'

return r.text

except

:return

'xx'

模擬登陸移動端

s=requests.session(),請求時自動帶上cookie

s=requests.session(

)#模擬登陸微博

deflogin()

:#登陸url

url=

''#請求頭

headers=

#傳入的引數

data=

try:

r=s.post(url,headers=headers,data=data)

r.raise_for_status(

)print

(r.text)

except

:print

('失敗'

)login(

)# 獲取page的html

defgethtmltext

(url)

: headers =

try:

#r = requests.get(url, headers=headers,timeout=30,proxies=)

r=s.get(url,headers=headers)

r.raise_for_status(

) r.encoding =

'utf-8'

return r.text

except

:return

'xx'

外網登陸SAP的兩種方式

1 用sap router實現從外網登入sapserver 方式一 sapserverip 192.168.0.2,路由器中設為dmz區 在sapserver上啟用sap router,就可以 sap router的搭建很easy 1.找到sap的安裝資料夾 比如d usr sap ecc dveb...

Linux ssh登陸慢的兩種原因分析

如果做運維就一定會遇到ssh登陸linux伺服器慢的問題,問題比較好解決,一般google之後有很多文章都告訴你解決方法,但是很少有文章分析為什麼會慢,這篇文章簡單分析下ssh登陸慢的原因。如果ssh server的配置檔案 通常是 etc ssh sshd config 中設定usedns yes...

shiro處理兩種路徑進行登陸問題

1.以下是我的shiro配置 static anon userfiles anon login authc logout logout user 當我需要使用兩個位址都進行登陸時 新增了一句 welogin authc 但是當我提交的位址是 welogin時卻沒有走登陸流程。但是提交位址是 logi...