Linux安裝scrapy框架所遇到的坑

2021-09-22 01:35:28 字數 470 閱讀 1916

在進行爬蟲框架學習時,第一步需要安裝scrapy框架,但這哥們可是一點也不好安裝,所以我想把我所遇到的一些問題總結一下,希望能給遇到問題的朋友帶來一些幫助。

在安裝scrapy前需要安裝scrapy所依賴的包。

sudo apt-get install build-essential

sudo apt-get install python3-dev

sudo apt-get install libxml2-dev

sudo apt-get install libxslt1-dev

sudo apt-get install python3-setuptools

總結:安裝scrapy框架花了半天+兩個晚上,說實話浪費了很多時間。如果一開始從不用想的那麼複雜就不會走這麼多彎路。建議大家在遇到問題時,先靜下心來,仔細想想會在哪一步出問題,如果一下解決不了,可以緩緩,放一放。千萬不要暴躁洩氣,總會解決的,解決了就是一次進步。

安裝scrapy框架

1 直接安裝scrapy一般會出現錯誤 pip install scrapy 會出現以下錯誤 5p twisted setup.py f getattr tokenize,open open file code f.read replace r n n f.close exec compile co...

安裝Scrapy框架

1.安裝 scrapy 通過 pip install scrapy 即可安裝。2.如果在windows下,還需要安裝 pipwin32 如果不安裝,那麼以後執行scrapy專案的時候會報錯。安裝方式 pip install pipwin32 3.如果在ubuntu下,還需安裝一些第三方庫 sudo ...

python安裝scrapy框架

說明之前在 window 10 64 python 3.5 64 環境下就已經成功安裝了 scrapy,當然也費了不少周折。為了方便後來的朋友,特將 python 3.5 下的 scrapy 安裝步驟記錄如下 注意 本文基於環境 windows 7 64 python 3.5 64 1 安裝 pyw...