通過抓包工具，基於全域性搜尋，可以將動態載入資料的資料報定位到
.json()方法：將獲取到的響應中的字串形式的json資料以字典或者列表形式返回
#.json()表示將獲取的字串形式的json資料序列化成字典或者列表
page_text = response.json(
)#解析出電影的名稱和評分
for movie in page_text:
movie_name = movie[
'title'
] movie_socre = movie[
'score'
(movie_name, movie_socre)
思考：為什麼基於抓包工具進行全域性搜尋，不一定100%可以定位到動態載入資料對應的資料報？原因：如果動態載入的資料是經過加密處理的密文資料，全域性搜尋是搜不到的，需要前台進行解密，例如
js加解密的破解…
爬蟲 02 requests模組
見ipynb 見ipynb 實現引數動態化 params response requests.get url url,params params,headers headers 解決方法 修改響應資料的編碼格式 encoding返回的是響應資料的原始的編碼格式，如果給其賦值則表示修改了響應資料的編碼...
02爬蟲requests請求庫
1.介紹 使用requests可以模擬瀏覽器的請求，比起之前用到的urllib，requests模組的api更加便捷 本質就是封裝了urllib3 3.安裝 pip3 install requests 4.各種請求方式 常用的就是requests.get 和requests.post import ...
二 python爬蟲之基於requests模組學習
requests模組是python中原生的基於網路請求的模組，其主要作用是用來模擬瀏覽器發起請求。功能強大，用法簡潔高效。在爬蟲領域中佔據著半壁江山的地位。因為在使用urllib模組的時候，會有諸多不便之處，總結如下 手動處理url編碼 手動處理post請求引數 處理cookie和 操作繁瑣 自動處...