Python(學習筆記 網路爬蟲)

2021-10-03 11:20:30 字數 765 閱讀 1728

這篇呢作為學習筆記吧,應該不是太官方的

那就開始吧,不太正式,就不注重格式了

一、引言

首先我們應該想這麼個問題,學python的目的是什麼,最近我們開了python這門課,有好多同學的學習方法我感覺出了問題,有的同學問我怎麼學,說實在我也不知道,因為我也是新手,c語言也是剛及格,菜雞一枚。但是就我自己而言,python可能會不同於c,由於python的執行速度是比c要慢的,所以python並不是乙個太看重演算法的語言(個人理解),這就導致了乙個問題:刷題有用嗎?我的回答是:當然有用,但是如果你想鍛鍊你的演算法能力的話,不如去刷c語言的題,因為它更加複雜,所有的函式更加的少,可以更好的培養你的思維。(好像跑題了)算了不重要了,我最近在github裡找到乙個很好地學習python的專案可供參考:

可以參考一下,畢竟訪問量還是挺多的

二、正文

(一)什麼是爬蟲

嗯嗯正文到了!

所以,網路爬蟲到底是什麼呢

通俗的解釋就是:你把內個**上面的東西扣下來自己用。

如果再文明一點的話那就是:請求**並提取資料的自動化程式

(二)爬蟲的基本流程

一般的爬蟲是分為四步的

發起請求—>解析內容—>獲取相應內容—>儲存資料

這是乙個大致上的流程,具體的一些比較細緻的流程咱們下次再說

三、結尾

由於這可能是篇水文,就不往外發了,你們幾個看到就好了,莫噴,後期會有乾貨

網路爬蟲 python學習筆記

pip install requestsr requests.get url r requests.get url,params none,kwargs request其實只有乙個方法 request 有兩個物件 import request r requests.get print r.statu...

python網路爬蟲學習筆記

爬取網頁的通用 框架 網路爬蟲的盜亦有道 requests爬取例項 自動爬取html頁面 自動網路請求提交 主要方法 說明requests.request 構造乙個請求 requests.get 獲取html網頁的主要方法,對應於http的get requests.head 獲取html網頁頭資訊的...

Python之網路爬蟲學習筆記

大資料時代資料獲取的方式 1 企業生產的使用者資料 大型網際網路公司有海量使用者,所以他們積累資料有天然的優勢 有資料意識的中小企業,也開始積累資料。2 資料管理諮詢公司 通常這樣的公司有很龐大的資料採集團隊,一般會通過市場調研 問卷調查 固定的樣本檢測和各行各業的公司進行合作 專家對話 資料積累很...