爬蟲是什麼?

2021-07-11 02:52:33 字數 322 閱讀 6701

認識爬蟲是學習爬蟲的第一步。

曾經我覺得爬蟲是乙個很高大上的玩意兒,高大上到我完全不知道它是做什麼用的。

後來因為幫別人做乙個二手車**,需要知道所有車的類別、車型、車系,於是就用curl抓去了某網的所有這方面資訊,對,你沒有猜錯,就是它的,算是用php的curl寫了乙個初級不能再初級的「爬蟲」,才知道,我了個x,還能這麼玩。

對,我之前沒有任何python基礎,就把廖雪峰老師的python教程看了看。

包括這個系列筆記也是從網上別人那裡學來,自己吸收之後重新寫出來的。

那麼,什麼是爬蟲呢?網路蜘蛛麼?那什麼是網路蜘蛛呢?

對,這就是爬蟲。

python 爬蟲是什麼 python爬蟲什麼意思

python爬蟲指的是python網路爬蟲,又被稱為網頁蜘蛛,網路機械人,是一種按照一定的規則,自動地抓取全球資訊網資訊的程式或者指令碼,另外一些不常使用的名字還有螞蟻 自動索引 模擬程式或者蠕蟲。簡單來說網際網路是由乙個個站點和網路裝置組成的大網,我們通過瀏覽器訪問站點,站點把html js cs...

「python爬蟲「是什麼呢?

python爬蟲是用python程式語言實現的網路爬蟲,主要用於網路資料的抓取和處理,相比於其他語言,python是一門非常適合開發網路爬蟲的程式語言,大量內建包,可以輕鬆實現網路爬蟲功能。python爬蟲可以做的事情很多,如搜尋引擎 採集資料 廣告過濾等,python爬蟲還可以用於資料分析,在資料...

爬蟲的本質是什麼?

於 很多搞爬蟲的總愛吹噓分布式爬蟲,彷彿只有分布式才有逼格,不是分布式簡單不配叫爬蟲,這是一種很膚淺的思想。分布式只是提高爬蟲功能和效率的乙個環節而已,它從來不是爬蟲的本質東西。爬蟲的本質是網路請求和資料處理,如何穩定地訪問網頁拿到資料,如何精準地提取出高質量的資料才是核心問題。分布式爬蟲只有當爬蟲...