大資料運營之服務過程設計 卓有成效的管理者

2021-10-01 08:28:40 字數 3776 閱讀 6855

大資料服務過程包括服務目錄管理、容量管理、可用性管理、連續性管理、服務等級管理、資訊保安管理、**商管理等

兩者的共同點是:大資料服務歸根結底還是為企業運營服務的,是為了提公升企業在建設、市場營銷、產品銷售、客戶服務、企業管理等方面的能力。

大資料服務在設計階段的過程包括服務目錄管理、容量管理、可用性管理、服務等級管理、資訊保安管理、**商管理等

1.1.1 大資料服務目錄管理

服務目錄相當於飯店裡點菜的選單,使用者可以通過服務目錄可以看到有哪些服務,管理者也可以通過服務檢視服務所依賴的資源,進而可以算出服務的成本效益。

隨著大資料服務數量的增多,需要對其進行分級分類管理,以便能夠快速地檢索和定位大資料服務。同樣,大資料服務也會不斷優化完善的,因此需要對大資料服務增加版本標籤的方式予以區分。

大資料服務目錄可以按照大資料服務支撐的業務應用進行分類組織,比如一級大資料服務可以分為投資建設類、市場經營類、資源運營類、行政綜合類和企業管理類。

可以在一級基礎上進一步細分,比如市場經營類可以細分為市場營銷、銷售、客戶服務和計費收費。

按照這種分類方式,可以明確大資料服務支撐的業務應用所在的位置,可以讓使用者更高效地找到大資料服務。比如,某大資料服務的目標就是為支援企業的網路規劃設計,那麼就應當在投資建設類中查詢滿足這一要求的大資料服務。

1.1.2 大資料服務容量管理

容量管理不僅對於it服務設計重要,對於大資料服務設計仍然非常重要

大資料服務通常以三種形式提供,不同型別的大資料服務對於容量的需求是不同的。

第一類是支援操作決策的大資料服務,這樣的大資料服務需要嵌入到生產型過程中,使用者在使用生產型應用的過程中同樣會呼叫大資料服務,因此要求大資料服務能夠提供保證業務連續性的能力。

這種型別的大資料服務與面向操作的事務型應用對於容量的需求類似,因此對該類大資料服務進行容量設計時,可以把其當作事務型服務看待。

第二類大資料服務屬於統計分析型,該類大資料服務更多是為了滿足企業中層管理人員統計某個時間段的資料,比如統計某個季度的產品銷售資料、某個年度的現金流量等,輔助管理人員發現生產經營中存在的問題。

由於這樣的大資料服務並不嵌入到生產型應用之中,因此對於實時性要求沒有那麼高,對該類大資料服務進行容量設計時,主要考慮特定時間段的容量需求,比如月初月末。

第三類大資料服務主要面向企業的高層戰略管理人員,比如企業的總經理、戰略規劃師等,這樣的人員通常關注半年以上的中長期規劃,需要借助大資料服務掌握市場情況、與競爭對手之間的差距等。

這樣的大資料服務對於響應時間通常要求不高,更關注於資料背後隱藏的規律,設計重點為決策模型,由於該類大資料服務往往需要以多年的歷史資料為分析基礎,因此可以考慮採用基於雲架構的基礎設施,以便彈性地適應不斷增長的支撐能力需求。

1.1.3 大資料服務**商管理

在大資料時代,資料成為企業的核心資產,而由於社會的專業化分工,資料也勢必分散在不同的企業之中。大資料服務與企業其他原材料一樣,如果不能保證及時準確的提供,將會降低大資料服務的能力。可見,對於大資料服務的**商進行有效管理同樣非常重要。

企業引入大資料服務與企業引入生產型服務一樣,需要進行有效的管理。比如大資料服務**商的准入和退出管理、服務質量管理、服務績效管理等。**商管理的目的是企業能夠及時、有效地獲取到滿足要求的大資料服務,包括資料提供的時效性、資料質量等。

**商的准入管理主要對**商大資料服務提供能力的要求,降低大資料服務提供風險,企業可以通過與**商簽署大資料服務**合同,從法律上保證因**商不能按照要求提供服務帶來的損失,降低企業生產和經營風險。

通過定期對**商提供的大資料服務進行考核評價作為大資料服務是否退出的依據。

1.1.4 大資料服務安全管理

我們將大資料看做企業核心資產的同時,也就意味著資料在企業中有著非同一般的價值和作用。此外,大資料還有不同於企業其他資產的獨特性,比如企業的客戶資料會涉及個人或者企業的隱私,可能會涉及企業的商業秘密。

為了保證大資料服務的安全性,需要從以下三個方面做起

第一是保證資料不會被非法獲取,企業可以通過許可權控制機制實現認證和授權。

第二是當企業或個人使用資料時,要進行資料使用記錄,保留「痕跡」,為審計工作做好準備。

第三是資料的對外提供採用匿名或者統計資料的方式,保證資料使用方不會看到真實的個體資料,如果確實需要則可以採用審批和合約的方式,在法律制度對資料予以保護,要嚴懲違法者。

1.1.5 大資料服務服務等級管理

服務等級是大資料服務的使用者和大資料服務的提供者之間的共同約定,大資料服務的提供者需要按照約定的服務等級來提供服務。

當大資料服務提供方並沒有按照約定的服務等級提供服務時,需要進行服務能力提公升,以保證按照約定的服務等級提供服務。

比如,服務等級中約定使用者從提交大資料服務請求到服務響應的時間為3秒鐘以內,如果使用者實際使用過程中沒有滿足這樣的服務等級要求,大資料服務提供方則需要確認資訊系統的容量設計是否存在問題。

如果存在問題,則可以通過擴容大資料服務基礎設施容量的方式來滿足效能要求。當然,在大資料服務提供方沒有為使用者提供相應等級的服務時,大資料服務提供方應當給予使用方一定的經濟補償。

服務等級除了在系統響應效能方面的要求外,主要還是大資料服務提供的資料質量是否能夠滿足要求。例如,資料完整性和資料準確性應當保證超過合同約定的百分比。應當預先建立雙方都能認可的資料質量驗證方法。

1.1.6 大資料服務可用性管理

服務的可用性直接關係到使用者的體驗。如果使用者體驗好,則會提高使用者的辦事效率,反之則有可能導致使用者的流失並減少企業收入,可見可用性管理是非常重要的。

對於嵌入到生產過程中的大資料服務,需要保證高可用性,否則會因為無法及時做出決策而影響企業的生產經營,比如某銀行的貸款業務流程中整合了信用評估服務。

而信用評估服務就是乙個大資料服務,只有當信用評估大資料服務輸出客戶的風險敞口後,才能確定是否能夠為客戶提供貸款以及貸款額度,如果信用評估大資料服務不可用,則會延長使用者獲得貸款的時間,從而降低銀行貸款業務的辦理效率,甚至導致客戶的流失。

比較而言,提供決策參考的大資料服務和提供趨勢**的大資料服務,對於響應的實時性要求相對較低,因此對大資料服務的可用性要求相對也較低

當然,它們對於可用性的要求也需要根據具體情況來判斷,如果企業應付突發和緊急情況,這時候對以上兩類大資料服務的可用性要求也是非常高的,如果大資料服務不可用,則會為企業帶來很大的損失,原因是大資料服務的不可用影響到組織的決策效率,錯失了調整經營策略的好時機。

可見,大資料服務可用性對於企業的生產經營都是非常重要的,需要通過可用性管理的方法和手段來保證大資料服務具有較高的可用性。

實現大資料服務高可用性的方法分為兩種型別:被動型和主動型

被動型方法是要求系統對於大資料服務的運**況進行實時監控,根據監控結果進行度量和分析,並通過報表形式展現分析結果,根據分析結果來定位和解決影響大資料服務可用性的故障點。

主動型方法是採集使用者使用和系統執行資料進行主動分析,**可能影響大資料服務可用性相關的問題,提前優化和完善,防患於未然

1.1.7 大資料服務連續性管理

顧名思義,服務連續性管理就是保證服務不間斷。對於面操作的事務型應用,服務的連續性是服務質量的重要考量指標,當服務出現故障後應當盡快發現和解決問題,服務恢復時間的長短體現了服務連續性管理水平的高低。

對於大資料服務而言,與生產流程結合緊密的大資料服務的服務連續性是需要重點考慮的型別。對於其他型別的大資料服務,應該重點保障資料採集服務的連續性,因為如果資料採集失敗就意味著大資料服務依賴的資料樣本減少,進而影響到資料分析的結果。

大資料運營之資料儲存

大資料服務的資料來源不但來自歸屬於不同行業的組織之中,而且其型別還具有多樣性 variety 特徵。多樣性指的是大資料服務不僅包括例如姓名 年齡這樣的結構化資料,還包括歌曲 電影這樣的非結構化資料,此外網頁 郵件這樣的資料介於結構化和非結構化之間,屬於半結構化資料,也是大資料服務的重要資料來源。結構...

大資料之企業服務作用

大資料是如今計算領域行業最火熱的代名言,在它出現之初很多人都感到很驚訝,這個大資料是否真的有用?但是伴隨著大資料而出現的資料分析 資料探勘 資料安全等卻從側面突出了大資料的商業價值。大資料如今是調集海量資料和快速處理資料的綜合體,它的使用以及資料價值主要表如今以下幾方面 一 大資料的使用 大資料的技...

玩轉大資料系列之四 搜尋服務

摘要 搜尋服務是阿里雲產品非常重要的組成部分,也承載了阿里巴巴集團的全部主要的搜尋任務。這裡的搜尋服務主要包含兩個產品 阿里雲elasticsearch和開放搜尋opensearch。本文將介紹如何玩轉阿里雲搜尋的大資料服務。搜尋服務是阿里雲產品非常重要的組成部分,也承載了阿里巴巴集團的全部主要的搜...