乙個例子講明爬蟲請求庫requests

2022-06-18 04:24:08 字數 1396 閱讀 3700

使用requests可以模擬瀏覽器的請求,比起之前用到的urllib,requests模組的api更加便捷(本質就是封裝了urllib3)

1.安裝

pip install requests

2.例項

from random import

choice

import

requests

user_agents =[

"",

"user-agent:opera/9.80 (macintosh; intel mac os x 10.6.8; u; en) presto/2.8.131 version/11.11",

""]headers =

#傳送get請求

#傳送post請求

#獲取https

#gethttp()#傳送get請求

#posthttp()#傳送post請求

獲取https

3 。說明

requests.get 傳送的是get請求

requests.post傳送的是post請求

headers 存放請求頭

params 傳遞get請求引數

data 傳遞post請求引數

proxies 使用**

LineDDA的乙個例子

unit unit1 inte ce uses windows,messages,sysutils,variants,classes,graphics,controls,forms,dialogs,extctrls,stdctrls,buttons type tfmmain class tform ...

SQL GROUP CONCAT的乙個例子

我有乙個這樣的資料庫 user info 現在有乙個需求是把這樣 9 條記錄按照 username 來 group 成3條記錄 目標 shu female 201 lee male 202 yuki female 181 如果用select from user info group by usern...

explode的乙個例子

select level as level,explode split 1,2,3 as value 可以生成結果 level value level 1 level 2 level 3 lateral view 1.lateral view 用於和udtf函式 explode,split 結合來使...