做為乙個it從業11年之久的人員，我發現我很初級，老是要去找別人的**來搭乙個框架，來做開發，我覺得十分的失敗。我們的技術總監提醒了我，做任何事情都要明確的知道你要做什麼。我需要的是什麼呢，我需要的乙個含許可權管理的，單點登入整合的，含流程的完全開源的框架，並且可以實現元件化模組化可插撥的框架。
當今的軟體系統由於非常的龐大，對於**級的復用似乎要求粒度太細了，要想做到低耦合高內聚似乎很困難，那麼我想把復用的級別提高乙個層次似乎更加科學，實現元件組的復用，實現元件的api化，將api功能和頁面實現jar包化，元件間按api呼叫，各元件間無需知道實現細節，實現元件級別的解耦和復用，系統設計師設計系統時只需考慮元件的粒度和元件設計的問題。
針對上述問題，通過一系統的研究，我決定用下面一些技術手段來解決如下問題，實現模組化打包和模組可插撥。
文件：
Atlas 手淘元件化框架 阿里巴巴開源框架
同時他們還推出了專案官網，上線了技術文件 基於atlas構建後的apk結構如下圖，host與普通apk無異，但是manifest和assets會新增一些額外的內容，同時在armeabi目錄中會增加若干個bundle構建的產物，取名為string.format lib s.so,packagename...
scrapy框架元件
scrapy是乙個爬蟲框架，有著非常健全的管理系統，重要的是它支援分布式。3.爬蟲 spiders 處理獲取到的所有responses，從其中分析提取item中標記好的資料，並將還需要進一步處理的url提交給引擎。7.爬蟲中介軟體 spider middewares 負責對引擎和爬蟲之間的通訊進行處...
Hadoop生態系統 序言
對hadoop生態系統學習及實踐有很長一段時間了，最早接觸hadoop生態系統是在2010年年底，那時正在為公司乙個專案研究搜尋引擎，最後選定nutch搜尋引擎作為研究物件，在研究nutch的過程中就與hadoop結下了不解之緣。在實踐hadoop過程中，遇到過很多問題，也迷茫過，不知道hadoop...