安裝 python 爬蟲框架 Scrapy

2022-06-27 17:09:14 字數 762 閱讀 4452

官方安裝說明文件:

一、scrapy 需要以下依賴

二、一般來說,你可以通過以下命令直接安裝 scrapy(依賴會被自動安裝)

pip3 install scrapy
注:關於pip 和 pip3 的區別,請看 這裡

三、乙個常見的問題是:安裝 twisted 時,會報 「microsoft visual c++ 14.0 is required」 錯誤

解決辦法有兩個:

1、老老實實安裝 visual c++ build tools 2015 套件,套件比較大(大概4g),安裝時間比較久,傳送門:visual c++ build tools 2015

2、用安裝 whl 檔案的方式安裝 twisted

pip3 install twisted-19.2.1-cp37-cp37m-win32.whl
五、正常安裝 scrapy

pip3 install scrapy
六、如遇到其他錯誤,可以重複以上步驟,使用 whl 檔案方式安裝 python 擴充套件

官方:非官方:

python爬蟲之安裝scrapy框架

scrapy框架 什麼是框架?就是乙個整合了很多功能並且具有很強通用性的乙個專案模板。如何學習框架?專門學習框架封裝的各種功能的詳細用法。什麼是scrapy?scrapy框架的安裝步驟 環境的安裝 mac or linux pip install scrapy windows pip install...

windows安裝python3的scrapy框架

cp後面代表你python的版本號,例如cp35m,ui有的版本為python3.5.0 還要注意電腦是32位還是64位 還要確保自己的pip是否完成安裝,pip v命令測試下 依據下面的5步完成安裝 wheel安裝這個庫,就可以安裝wheel檔案 1.pip install wheel 2.pip...

Python爬蟲框架

一 u know!二 scrapy入門教程 三 網路爬蟲之scrapy框架詳解 四 scrapy編寫步驟 詳情見二 scrapy入門教程 1 mkdir乙個爬蟲資料夾 例 mkdir home zy pachong pa test 10 28 2 在 home zy pachong pa test ...