工業大資料漫談17 雲計算與工業大資料的關係

2021-08-02 21:30:10 字數 2281 閱讀 2960

前面聊了工業大資料與工業4.0和物聯網(iot)的關係,今天來看看工業大資料和雲計算的關係。

雲計算這一概念可以追溯到上個世紀sun和oracle提出的「網路就是計算機」。限於當時的網際網路條件等多方面的原因,這一提法後來不了了之。造化弄人,後來當雲計算再次「火」起來的時候,雲計算的鼻祖之一sun卻處境尷尬,最終被oracle收購。而oracle則對雲計算這個新名詞似乎有些牴觸,在雲計算方面一直非常低調。

把雲計算作為乙個概念正式提出的應該是google公司。2023年google公司內部啟動了乙個專案,研發一種可以將應用程式分布到多個伺服器上執行的方法。後來,ibm公司參與到google的這個研究專案中。ibm在與google的合作過程中提出了自己對雲計算的理解以及相應的技術解決方案, 其中就包括2023年提出的「藍雲計畫」,並將雲計算這個概念成功地推向市場。隨後,雲計算受到了眾多it廠商的關注: 亞馬遜、微軟、sun、hp、dell、emc等眾多it巨頭紛紛加入,如今這個名單越來越長,雲計算已經成了乙個最時髦的標籤。

也許正是因為太多的廠商號稱自己是雲計算技術的提供商,每家廠商都基於自己的產品提出了對自己最有利的解釋,所以,至今關於什麼叫雲計算仍然是眾說紛紜。在ibm的技術***「雲計算」中給出了這樣的定義: 雲計算一詞同時用來描述乙個系統平台或者一種型別的應用程式,乙個雲計算的平台可按需進行動態的供給、配置、重新配置以及取消服務等。

這樣的描述顯然太學術,ibm大中華區雲計算中心專案總監朱近之對此進行了解釋:「雲計算是一種計算模式,在這種模式中,應用、資料和it資源以服務的形式通過網路提供給使用者。雲計算還是一種基礎架構管理的方**,大量的計算資源組成it資源池,用於動態建立高度虛擬化的資源提供給使用者使用。」

專家們對雲計算也有自己的解釋:

「雲計算就是把你的計算資源,包括硬體資源(如計算機、儲存器)、軟體資源(如應用軟體)都放到雲上面去,簡單地說,雲就是網際網路。」清華大學電腦科學與技術系鄭緯民教授這樣解釋。

「雲計算就是基於網際網路的計算,是對網際網路的抽象,是一種能夠支援網際網路上各類應用的系統。」北京航空航天大學計算機學院錢德沛教授如此介紹。

時至今日,雲計算也沒有乙個大家都認可的定義,不過沒關係,定義認可不認可並不影響雲計算已經成為當前資訊產業的主流發展模式,現在的雲計算,已經是社會方方面面參與建設的it產業了。

用通俗移動的話講,雲計算就是一種按使用量付費的it模式,即用了多少付多少錢,我們以前傳統的it業務是直接購買計算機軟硬體(包括伺服器、儲存、網路、系統軟體、應用軟體等),而雲計算是將這些it資源集中搭建,使用者不需要購買這些裝置,而是透過網路通過租用的模式進行使用。這種模式提供可用的、便捷的、按需的it服務,通過雲的運營商對可配置的計算資源共享池進行管理,這些資源能夠被快速提供給使用者使用。而使用者只需投入很少的管理工作並付出極低或更合理的使用成本,即可得到與從前同功效、同質量的it服務。

當前的雲計算產業,分為兩大類,一類是公有雲,一類是私有雲。嚴格意義講,私有雲不能算是真正的雲計算,只能算是傳統資料中心模式向雲計算模式過度的一種中間形態。

當前,公有雲廠商可以提供以下幾個層次的服務:基礎設施服務(iaas),平台服務(paas)和軟體服務(saas)。

iaas:基礎設施即服務

iaas(infrastructure as a service):使用者從雲計算運營商那裡租用硬體資源(伺服器、儲存、網路、機房等),將自己的應用軟體放在這些資源上執行,然後通過網路獲得應用軟體所提供的資訊與資料。例如:阿里公司提供的伺服器租用業務。

paas:平台即服務

saas:軟體即服務

saas(software as a service):雲計算運營商直接向使用者提**用所需的全部資源,使用者無需購買軟硬體(包括應用軟體),直接使用雲上的應用來管理企業的經營活動。例如,谷歌的網上office,即可直接在瀏覽器中編輯、修改文件,而不用在本機購買安裝微軟的office軟體。

可以看出,雲計算是工業大資料的基礎設施平台,如果把雲計算比喻成高速公路,大資料就是在高速公路上跑的汽車。工業大資料可以用到雲計算的不同層面,在iaas層,工業大資料需要使用雲計算廠商提供的計算資源,在paas層,需要使用各類介面及平台,例如資料庫,工業大資料一般也不會自己部署,而是採用雲廠商提供的資料庫,在saas層,工業大資料會提供各類saas化的應用給終端使用者。

在實際專案中,需要根據使用者的不同而選擇不同的雲計算模式。如果是中小企業,最好的模式是統一的工業大資料平台,例如,在公有雲上搭建乙個專業的工業大資料平台,直接提供saas化的服務給使用者。但如果是大型企業,可能會選擇私有雲,在使用者的私有雲上部署工業大資料的應用,這時,就需要和使用者進行詳細交流,根據不同的私有雲的技術,結合工業大資料的技術來進行部署和應用。

工業大資料漫談3 什麼是工業大資料?

前面兩部分我們大概了解了一下大資料的由來和特點,這一部分我們來看看什麼是工業大資料,它和傳統我們理解的大資料有什麼不同?在了解什麼是工業大資料的時候,我覺得我們有必要先了解一下什麼是工業以及工業都包括哪些門類。工業 industry 是指採集原料,並把它們加工成產品的工作和過程。一般,我們把工業分為...

資料清洗 工業大資料

異常值檢查方法 1 基於統計分析 異常檢測問題就在統計學領域裡得到廣泛研究,通常使用者用某個統計分布對資料點進行建模,再以假定的模型,根據點的分布來確定是否異常。如通過分析統計資料的散度情況,即資料變異指標來對資料的總體特徵有更進一步的了解,對資料的分布情況有所了解,進而通過資料變異指標來發現資料中...

工業大資料的特徵

定義 工業大資料即工業資料的總和,分成三類,即企業資訊化資料 工業物聯網資料,以及外部跨界資料。空間分布 不僅存在於企業內部,還存在於產業鏈和跨產業鏈的經營主體中,如scm crm。產生主體 人和機器。人產生的資料如 設計資料 業務資料 產品資料。機器資料有生產裝置 生產排程 質量控制與績效資料 和...