爬蟲開發過程中 程序和執行緒的概念是非常重要的 提高爬蟲的 工作效率 打造分布式爬蟲
都離不開程序和執行緒的身影
多程序 多執行緒 協程 分布式程序等四個方面
使用os模組中的fork方法
使用multiprocessing模組
前者僅僅適用unix/linux作業系統
對windows不支援
後者是跨平台的實現方式
fork方法來自於unix/linux作業系統中提供的乙個fork系統呼叫
這個方法非常特殊，
普通的方法都是呼叫一次 返回一次
而fork方法是呼叫一次 返回兩次
原因在於 作業系統將當前程序（父程序） 複製出乙份程序（子程序）
這兩個程序幾乎完全相同
fork方法分別在父程序和子程序返回
子程序中永遠返回0
父程序中返回的子程序 的id
os模組中getid方法用於獲取當前程序的id
getpid用於獲取父程序的id
-0--------
寧波諾丁漢大學
Python 執行緒和程序
一 什麼是執行緒 1 執行緒是作業系統能夠進行運算排程的最小單位。它被包含在程序中，是程序中的實際運作單位。一條執行緒指的是程序中乙個單一順序的控制流，乙個程序中可以併發多個執行緒，每條執行緒並行執行不同的任務。每個程序至少包含乙個執行緒.二 什麼是程序 1 乙個程序就是乙個程式的例項,每個程序裡面...
python執行緒和程序
執行緒 計算機能夠進行排程的最小單位 乙個程序可以包含多個執行緒，執行緒共享程序資源 多執行緒併發 上下文程序就像乙個工作的房間 記憶體 以及房間裡工作需要的資源 i o啊，網絡卡啊 執行緒相當於工作的人 所有的在同乙個程序中的執行緒是共享一塊記憶體空間 pid 唯一的程序識別符號 each pro...
Python 高階 程序和執行緒
一 編碼規範 1 編排 1 縮排四個空格，空格與tab不能混用 2 行長80，防止單行邏輯複雜 2 import 1 不能用 from import 2 順序 標準庫 第三方庫 自定義庫 3 單行不要import多個庫 4 模組內用不到的不要去import 3 空格 1 標點符號後面跟乙個空格，前面...