怎樣才能發揮大資料的潛能

2021-09-30 22:49:32 字數 2538 閱讀 5353

大資料可以產生巨大的經濟價值。比如大資料為美國醫療領域每年創造3000億美元的價值,將年生產力增長約0.7%;為歐洲公共部門管理每年創造2500億歐元的價值,將年生產力增長約0.5%;為全球個人定位服務**商每年創造超過1000億美元的收益,對終端使用者的價值高達7000億美元;將美國零售業的淨利潤增加可能超過60%,並保持0.5%-1.0%的年均生產率增長;將生產製造業在產品開發、裝配成本上開銷減少高達50%,流動資金減少高達7%。

這聽起來不錯,少花錢還多辦了事。然而要充分利用大資料,則需要處理相當多的挑戰。那麼如何有效利用大資料呢?或者說要發揮大資料的全部潛能,我們首先要解決的問題是什麼呢?

人才,人才,人才。重要的事情說三遍。人才短缺是利用大資料首先要解決的問題。特別是缺少在統計和機器學習上有精深的專業知識的人,以及有眼光知道如何利用大資料經營公司的經理和分析師,會妨礙資料的有效利用。根據調查,僅在美國就面臨著15-19萬深度分析技能的人才,以及150萬分析大資料與決策的經理和分析師缺口。

缺少人才僅僅是個開端。其他挑戰包括:建造合理的基礎設施,合理激勵和競爭持續創新,可以被使用者、組織和經濟體恰當理解的經濟效益,合理處理公眾有關大資料擔憂的保護措施。

另外,要充分發揮大資料潛能,還必須要解決以下幾個問題。

當空前規模的資料被數位化並跨越組織邊界進行傳播時,有一系列政策問題將變得越來越重要,包括但不限於隱私、安全、智財權和責任。顯然,隱私問題的重要性,特別是對消費者,隨著大資料的價值增加而增加。

個人資料,比如醫療和金融記錄,往往能提供最重要的資訊以實現價值,如幫助找出正確的醫療手段或最優的金融產品。然而,消費者也把這些類別的資料看作是最敏感的。顯然,個體和他們所生活的社會將不得不在隱私和實用性之間取捨。

另乙個緊密相關的擔憂是資料安全,如怎樣保護競爭中的敏感資料或其他應保密的資料。最近的例子已經證明,資料洩露不僅會暴露消費者個人資訊和企業機密資訊,也包括****秘密。隨著嚴重破壞的上公升,通過技術和政策工具解決資料安全將成為關鍵。

大資料不斷增加的經濟重要性也引起了若干法律問題,尤其加上資料從根本上不同於許多其他資產的事實。資料可以完美複製,很容易與其他資料相結合。相同的資料可由多人同時使用。與有形資產相比,所有這些都是資料的獨特特徵。關於資料的智財權問題也來了:誰「擁有」某條資料,與資料相關的權利有哪些?怎麼定義資料的「公平使用」?還有與責任有關的問題:誰來負責一條不準確的資料導致的負面後果?為了充分發揮大資料的潛能,這些型別的法律問題遲早將需要解決。

為了從海量資料中獲取價值,組織將不得不部署新的技術(如,儲存、計算和分析軟體)和方法(如,新型別的分析)。技術挑戰的範圍和為解決它們而安排的優先順序,取決於機構的資料成熟度。新的問題和日益增長的計算能力將刺激新的分析方法的發展。還需不斷的技術和方法創新,來幫助個人和組織整合、分析、具化和消化大資料增長形成的洪流。

組織領導者往往缺乏對大資料價值的理解以及如何開啟這個價值。在競爭性強的行業,這可能是某些公司的致命弱點,因為他們的競爭對手以及新入行者可能會利用大資料跟他們競爭。而且,正如上面已經討論過,許多組織沒有合適的人才從大資料中獲得見解。另外,今天許多組織沒有系統安排流程和鼓勵措施,來優化使用大資料和做出更好的決定,並採取更明智的行動。

為了使機遇轉化為可能,公司將越來越多地需要整合來自多個資料來源的資訊。在某些情況下,組織將能購買到資料的訪問權。然而在其他情況下,獲得第三方資料往往不簡單。第三方資料的**可能沒有考慮分享它。有時候,經濟收益不足以鼓勵利益相關者共享資料。擁有某些資料集的利益相關者,可能認為資料集是乙個重要的競爭優勢的**,因此不願意與其他利益相關者共享。其他利益相關者必須設法提供令人信服的價值主張給有資料價值的持有人。

相對缺乏競爭強度和績效公開的行業,和利潤池高度集中的行業,充分利用大資料的進度很可能是緩慢的。例如,在公共行業,往往缺乏限制效率和生產力的競爭壓力;因此,該行業在使用大資料獲得潛在價值的道路上,比其他行業面臨更多困難的障礙。

美國醫療保健,是產業結構影響從海量資料中獲得價值的容易程度的另乙個例子。這是乙個不僅缺乏成本和質量績效公開的行業,也是乙個付款人從臨床資料的使用中獲利(減少不必要的**支出)。然而,付款人收益的增加,意味著醫療機構收益的減少(不必要的**將減少)。正如這些例子所示,組織領導者和政策制定者如果要確定在個人企業、行業和經濟體作為乙個整體的水平上如何優化價值創造,他們將不得不考慮產業結構如何能夠在大資料的世界中演化。

有效利用資料有可能會轉變大經濟體,提供新一波生產力增長和消費者剩餘。組織領導者需要認識到潛在的機會以及大資料所帶來的戰略威脅,並結合成功抓住大資料機遇的必要因素,評估和改進他們當前的it功能與資料策略。他們將需要創造性和主動地確定哪些資料池他們能夠組合創造價值,並如何獲得這些池的訪問權,以及解決安全和隱私問題。關於隱私和安全問題,一項重要任務是幫助消費者了解,存在風險的同時使用大資料能提供什麼好處。同時,公司需要招聘和留住深度分析人才,並培訓他們的分析師和管理隊伍,變得更加具有資料頭腦,建立一種在決策中看重和獎勵使用大資料的文化。

政策制定者需要認識到利用大資料來釋放下一波經濟增長的潛力。他們需要提供體制框架,在保護公民的隱私和保障資料安全的同時,允許公司能夠輕鬆從資料中創造價值。他們還可以在通過教育和移民政策幫助緩解人才短缺;在建立包括通訊網路等合適的基礎設施技術促動要素;在包括先進分析的選定地區加快研究;在創造鼓勵創新的智財權框架中發揮著重要作用。協調利益的創造性的解決方案也可能是必要的,例如,要求相關機構分享某些資料以促進公共福利。

怎樣才能dump Oracle資料庫的內部結構

問題 怎樣才能dump資料庫的內部結構?解答 常見的方法如下 1 分析資料檔案塊,轉儲資料檔案n的塊m alter system dump datafile n block m 2 分析日誌檔案 alter system dump logfile logfilename 3 分析控制檔案的內容 al...

丟失的檔案怎樣才能恢復

丟失的檔案怎樣才能恢復 如果現在的朋友問我,你能不能幫我找回不小心刪除了的檔案,我可以肯定的告訴他,你只要沒有再往裡面寫入新的資料,我就能幫你找回來。我這麼自信並不是因為我有多麼高深的黑客技術,我只是乙個宅男而已,絕對不是技術宅。為什麼我說可以找回呢,因為我有號用地額資料恢復軟體。是它可以幫我們找回...

大資料流處理怎樣才能讓新興市場發展更好

多年來,大資料已經改變了很多事情,其中之一就是流處理。這就是它產生影響的方式和原因。隨著當今技術的發展,對流處理的需求也越來越大。例如,必須快速處理資料,以便企業能夠實時跟上不斷變化的業務和市場狀況。這就是實時流處理進入的地方,它可能會改變人們所知道的關於大資料的一切。大資料流處理如何幫助世界新興市...