Spark中的一些概念

2021-08-01 21:03:05 字數 271 閱讀 6074

一次action操作會觸發rdd的延遲計算,我們把這樣的一次計算稱作乙個job。

窄依賴指的是:每個parent rdd 的 partition 最多被 child rdd的乙個partition使用

寬依賴指的是:每個parent rdd 的 partition 被多個 child rdd的partition使用

窄依賴每個child rdd 的partition的生成操作都是可以並行的,而寬依賴則需要所有的parent partition shuffle結果得到後再進行。

攝影中的一些概念

1 什麼叫色別 色別是用以說明彩色和消色的區別。2 什麼叫明度 明度又叫明暗度,是顏色的深淺,也可以說它的明亮程度。3 色調的含義 色調是指顏色的性質即一張 中一定範圍的明亮程度 也稱明暗值 4 什麼叫色彩的飽和度 色彩的飽和度,就是顏色色調的可見程度,也稱色的純度。是指顏色純淨和鮮明的程度。某種顏...

UML中的一些概念

抽象 abstract 封裝 encapsulation 繼承 inheritance 多型 polymorphism 關聯 association 聚合 aggregation 組合 composition 內聚與耦合 cohesion coupling 域模型 domain model 域物件之...

openstack中的一些概念

1 endpoint endpoint,翻譯為 端點 我們可以理解它是乙個服務暴露出來的訪問點,如果需要訪問 乙個服務,則必須知道他的endpoint。因此,在keystone中包含乙個 endpoint 模板 endpoint emplate,在安裝keystone的時候我們可以在conf資料夾下...