爬蟲 雲盤資料搜尋

2021-09-13 10:44:04 字數 1031 閱讀 3547

import urllib.request

import urllib.parse

import os,time

#輸入貼吧名字

baname = input("請輸入貼吧的名字:")

start_page = int(input("請輸入起始頁"))

end_page = int(input("請輸入結束頁"))

#不完整的url

url = ""

#搞個迴圈,迴圈拼接每一頁的url,得到每一頁的**

for page in range(start_page,end_page+1):

#更具頁碼來計算pn

pn = (page-1)*50

#定義乙個get引數字典

data =

query_string = urllib.parse.urlencode(data)

#拼接得到的url

new_url = url + query_string

#構建請求物件

headers =

request = urllib.request.request(url=new_url,headers=headers)

# 傳送請求,得到響應

response = urllib.request.urlopen(request)

#建立資料夾

if not os.path.exists(baname):

os.mkdir(baname)

#生成檔名 李毅-第1頁.html

filename = '%s-第%s頁.html'%(baname,page)

#拼接檔案的路徑

filepath = os.path.join(baname,filename)

#將檔案寫入到dilepath裡面去

with open(filepath,'wb')as fp:

fp.write(response.read())

time.sleep(3)

雲資料盤擴容

磁碟型別 雲硬碟 對於雲硬碟 udisk 的磁碟擴容,請先在主機內部完成解除安裝操作。mount l 檢視當前卷,假設 dev vdb為雲盤 umount dev vdb fsck.ext4 dev vdb 然後在控制台選中磁碟,執行解除安裝操作 在雲硬碟控制面板完成擴容,並重新掛載,在主機內執行下...

阿里雲掛載資料盤

掛載步驟 1 執行 fdisk l 命令檢視例項是否有資料盤。如果執行命令後,沒有發現 dev vdb,表示您的例項沒有資料盤,無需格式化資料盤,請忽略本文後續內容。2 建立乙個單分割槽資料盤,依次執行以下命令 執行 fdisk dev vdb 分割槽資料盤。輸入 n 並按回車鍵 建立乙個新分割槽。...

阿里雲ECS Linux Centos資料盤擴容。

雲盤擴容注意重點!擴容之前一定要做快照備份。不要在生產環境,生產時間進行擴容。資料越大,擴容時間越長。20g高效雲盤大概5 10分鐘,200g高效雲盤大概30 50分鐘 擴容資料盤必須要先解除安裝磁碟,擴容後再掛載上去。本文示例是從20g擴容到26g。centos6.8系統。df h 檢查磁碟 當前...