這是我爬了乙個多小時的成果
話不多說上**！
import time
import requests
from bs4 import beautifulsoup
import shutil
import string
import os
import random
import random
import string
defget_img
(url,fn)
:#將影象儲存至本地
resp = requests.get(url)
with
open
('{}.png'
.format
(fn)
,'wb'
)as f:
f.write(resp.content)
#print(soup.prettify()) #prettify()樹狀圖列印
defimg_url
(url)
: resp = requests.get(url)
# 發起網路請求
soup = beautifulsoup(resp.text,
'lxml'
)# 獲取源**
for jj in soup.select(
'img[class="lazy"]'):
#print(jj.prettify())
img_address = jj.get(
'src'
)#獲得頭像位址
#呼叫儲存影象函式
time.sleep(1)
for link in soup.find(
"div",)
.find_all(
"a"):if
'href'
in link.attrs:
#print(link.attrs['href'])
page_next1=link.attrs[
'href'
] url=
''+page_next1
print
(url)
sum=
0for j in
range(99
):sum=
sum+
1print
(sum
) img_url(url)
url =
'/touxiang/qinglv/2021/1090659.html'
img_url(url)
用python爬個小說
上下班，地鐵間，用手機在各類 看 時，總會有莫名其妙的彈窗，是不是很煩惱。其實我們可以借助python寫個小工具，將想看的 爬下來。我們可以通過bp 瀏覽器f12也可以，不過不如bp直觀 看一下輸入目錄頁的url之後會看到什麼資訊 該結果是乙個json格式，其中欄位chaptername代表章節名稱...
用python爬取小說章節內容
在學爬蟲之前,最好有一些html基礎,才能更好的分析網頁.主要是五步 1.獲取鏈結 2.正則匹配 3.獲取內容 4.處理內容 5.寫入檔案 如下 匯入相關model from bs4 import beautifulsoup import requests import re 獲取目標鏈結位址 ur...
用Python爬取京東手機評論
好評 中評 差評 追評 可以看到這個url裡都有以下幾個引數 videocount 2638,videocountstr 2600 aftercount 4852,aftercountstr 4800 showcount 24200,showcountstr 2.4萬 productid 10000...