網路爬蟲（又稱為網頁蜘蛛，網路機械人，在foaf社群中間，更經常的稱為網頁追逐者），是一種按照一定的規則，自動地抓取全球資訊網資訊的程式或者指令碼。另外一些不常使用的名字還有螞蟻、自動索引、模擬程式或者蠕蟲。
頂書-提公升it技術和認知i-book.top
精通python爬蟲框架scrapy
scrapy是使用python開發的乙個快速、高層次的螢幕抓取和web抓取框架，用於抓web站點並從頁面中提取結構化的資料。《精通python爬蟲框架scrapy》以scrapy 1.0版本為基礎，講解了scrapy的基礎知識，以及如何使用python和三方api提取、整理資料，以滿足自己的需求。本書共11章，其內容涵蓋了scrapy基礎知識，理解html和xpath，安裝scrapy並爬取乙個**，使用爬蟲填充資料庫並輸出到移動應用中，爬蟲的強大功能，將爬蟲部署到scrapinghub雲伺服器，scrapy的配置與管理，scrapy程式設計，管道秘訣，理解scrapy效能，使用scrapyd與實時分析進行分布式爬取。本書附錄還提供了各種軟體的安裝與故障排除等內容。本書適合軟體開發人員、資料科學家，以及對自然語言處理和機器學習感興趣的人閱讀。
用python寫網路爬蟲
作為一種便捷地收集網上資訊並從中抽取出可用資訊的方式，網路爬蟲技術變得越來越有用。使用python這樣的簡單程式語言，你可以使用少量程式設計技能就可以爬取複雜的**。《用python寫網路爬蟲》作為使用python來爬取網路資料的傑出指南，講解了從靜態頁面爬取資料的方法以及使用快取來管理伺服器負載的方法。此外，本書還介紹了如何使用ajax url和firebug擴充套件來爬取資料，以及有關爬取技術的更多真相，比如使用瀏覽器渲染、管理cookie、通過提交表單從受驗證碼保護的複雜**中抽取資料等。本書使用scrapy建立了乙個高階網路爬蟲，並對一些真實的**進行了爬取。
精通scrapy網路爬蟲
SQL必看書籍推薦
sql 即結構化查詢語言 structured query language 是一種特殊目的的程式語言，是一種資料庫查詢和程式語言，用於訪問資料以及查詢 更新和管理關係型資料庫。結構化查詢語言是高階的非過程化程式語言，允許使用者在高層資料結構上工作。它不要求使用者指定對資料的存放方法，也不需要使用者...
產品經理必看書籍推薦
在 神一樣的產品經理憑什麼那麼神 這篇文章中，我曾結合自己的工作實踐總結過產品經理需要的一些基本素質，如市場洞察 抽象概括 創新想象 心思細膩 熱愛產品 具備一定的企業家精神等等，這些基本素質既包括iq層面也涉及很多eq層面的。在我看來，產品經理更應該是通才，在市場 設計 專案 管理 使用者 統計 ...
產品經理必看書籍推薦
在 神一樣的產品經理憑什麼那麼神 這篇文章中，我曾結合自己的工作實踐總結過產品經理需要的一些基本素質，如市場洞察 抽象概括 創新想象 心思 細膩 熱愛產品 具備一定的企業家精神等等，這些基本素質既包括iq層面也涉及很多eq層面的。在我看來，產品經理更應該是通才，在市場 設計 專案 管 理 使用者 統...