爬取大眾點評資料，使用多執行緒處理。
使用多執行緒爬取的目的是兩個，
乙個是 多執行緒執行起來快。
第二則是 乙個人訪問的url通過多執行緒的緣故變得雜亂無章，這樣不容易被發爬機制 確定。
from concurrent.futures import threadpoolexecutor
通過引入 threadpoolexecutor 完成多執行緒操作，
第二，爬取的過程中，每次爬取乙個url的內容後就 time.sleep(random.randint(0,4))
休眠0～4秒的隨機數，這樣訪問的頻率不那麼高，就不容易被反派機制發現，被封鎖ip了
大眾點評資料平台架構變遷
出處 最近和其他公司的同學對資料平台的發展題做了一些溝通，發現各自遇到的問題都類似，架構的變遷也有一定的相似性。以下從資料 架構 應用的角度對2012.07 2014.12期間大眾點評資料平台的架構變遷做乙個概括性的總結，希望對還處在資料平台發展初期的同學有一些幫助，歡迎線下溝通。資料 1.以支援使...
大眾點評資料平台架構變遷
最近和其他公司的同學對資料平台的發展題做了一些溝通，發現各自遇到的問題都類似，架構的變遷也有一定的相似性。以下從資料 架構 應用的角度對2012.07 2014.12期間大眾點評資料平台的架構變遷做乙個概括性的總結，希望對還處在資料平台發展初期的同學有一些幫助，歡迎線下溝通。資料 1.以支援使用者報...
大眾點評的謀局 對局與破局 大眾點評為什麼要賣？
今年，整個網際網路都很不太平 賣的賣，死的死，散的散！作為上海唯一一家根正苗紅的網際網路企業，大眾點評已經活到第十個年頭。掰開手指頭算算，放眼整個網際網路，10 年，沒上市也沒被併購，甚至沒死的，好像沒有幾家。迅雷，大眾點評與豆瓣 豆瓣與大眾點評，這兩家慢公司處在 分分鐘 就有公司關門的網際網路行業...