企業利用所有資料必須克服的五大挑戰

2021-09-23 05:23:25 字數 1661 閱讀 6437

如今的組織知道他們需要充分有效地利用所有的資料,這包括日益增長的通訊數位化,以及從燈泡到智慧型手機的所有資料。他們也知道,必須捕獲各種各樣的資料,以便通過能夠訪問的方式儲存資料,並根據業務快速變化的需求查詢資料。他們也知道,他們無法忍受刻板的、預先安排好的模式。然而他們發現,這說起來容易做起來難。

那麼是什麼妨礙了他們實施?有很多事情,而組織必須克服的五大挑戰是為了充分利用其資料以及合作夥伴的資料和其他外部資料來源。

(1)無法使用多種資料型別和格式。如今的資料有各種格式,規模和形式,必須實時處理和分析。這包括不適合傳統關係資料庫系統的行和列的資料。更重要的是,這些不同的形式和型別的資料需要無縫地一起使用。豐富的結構化資料,圖形資料,地理空間資料和非結構化資料可能都被視為單個查詢或事務。

(2)基於傳統系統的創新步伐緩慢。如今,技術和業務需求幾乎每天都在變化,組織需要進行創新,以保持競爭力和合規性。許多公司卻幾乎無法處理他們手頭上的資料,更不用說未來會發生什麼,例如物聯網生成的資料。在創新方面進行投資時,他們常常感到沮喪,因為他們需要處理擁有組織的大量資料資產的傳統系統,這些系統將成為減緩其進展以及提高有效競爭能力的阻礙。

(3)企業資料倉儲的擴散。各種資料的快速增長和企業為客戶提供的服務數量的增長,在造成了企業中資料孤島的擴散。為了更好地服務於客戶、監管者和他們自己,企業需要對客戶、產品等業務物件建立360度的檢視。但是,建立這種整體景觀是一項艱鉅而耗資巨大的任務。一直以來,企業正在建立更多的資料孤島。更糟糕的是,資料質量和這些觀點的治理常常是事後的結果,甚至會導致監管處罰。

(4)etl和模式優先系統的使用。關聯式資料庫實際上是大多數組織中儲存資料的標準。一旦填充了關係模式,使用sql進行查詢就很簡單。這聽起來不錯,但這是乙個大問題,但是組織必須建立查詢將被發布的模式。整合所有現有的模式(可能是主機資料和文字內容)需要在業務部門,主題專家和實施者之間進行大量的時間和協調。然後,一旦模型被各利益相關者最終確定,必須將資料從源系統中提取,轉化為適合新的模式,然後載入到新的稱之為etl過程(即資料抽取、轉換、裝載的過程)。這些過程不需要太長時間(平均6-18個月)。而且,它永遠不會結束。資料來源發生變化。新增新的**。提出了不同的問題。etl一直在接受,而不是給予。

(5)背景缺失。也許當今組織最大的問題是認為他們知道他們不知道的東西。沒有背景的資料是無用的。這些資料意味著什麼?它與其他資料有什麼關係?資料的出處是什麼?在什麼情況下,可以和誰分享?在大多數情況下,這些問題的答案不會在資料庫中捕獲。它可能在開發人員的頭腦中,或者設計文件中,或者etl指令碼裡,或者更糟糕的是在所有的這些地方中,但不是一致的。傳統資料庫並不側重於儲存,管理和查詢元資料,而典型的etl流程通常會將此資訊丟棄在本地。放棄背景意味著放棄從資料中獲得的最大價值。

那麼組織需要做什麼呢?越來越多的組織轉向多模型資料庫。使用多模型資料庫,他們可以捕獲資料的背景並將其與資料進行儲存,從而提供最大的資料敏捷性和可審計性。並且在將來防範資料庫系統對任何新型別的資料,轉移資料範例或監管要求,不可避免地出現偏移。

考慮採用多模型資料庫平台的公司應該尋求:

•多結構的本地儲存(結構感知)

•按原樣載入資料的能力(在載入資料之前不需要模式)

•能夠有效地對這些不同的模型進行索引

•能夠無縫地使用所有模型,並進行組合

•企業級安全性和可用性

當然,資料庫技術的轉變並不輕鬆,許多it專業人員在整個職業生涯只專注一種或幾種技術。 但是,如果組織有時間確保他們能夠有效地收集,分析和利用他們掌握的資料的話,那麼現在正是時候。

崑崙葉哲華 企業培訓需克服的五大弊端

崑崙葉哲華 企業培訓需克服的五大弊端 崑崙葉哲華 企業培訓,是企業實施有效人力資源管理及提高員工素質的重要途徑,日益受到企業重視。但 是,企業培訓應該克服弊端,以求取得最佳效果。一.崑崙葉哲華 出現培訓物件錯位 主要表現是一些崗位的骨幹,本應該跟上知識的更新,但是由於工作脫不開身,長期不能得到外出培...

新人必須掌握的五大Linux終端命令

有時候,我們不可避免地要使用終端,但它絕對沒有大家想象中那麼可怕。tux,linux吉祥物 我個人是 新世紀福音戰士 的鐵粉,因此這裡引用一句台詞 人們畏懼黑暗,因此努力在其中刻畫火焰的輪廓。對於很多linux新人來說,終端那陰沉的螢幕同樣是種黑暗 因此人們拼命利用gui加以替代。雖然圖形化使用者介...

程式猿轉管理的五大要克服的要素

程式設計師是最容易創業的,或者說是創業成本最低的職業。只要有一台電腦和投入自己的時間,就可以寫出暢銷天下的軟體,這是每個程式設計師的夢想。更何況世界首富常年以來就是程式設計師出身的比爾蓋茨,這也刺激了更多的程式設計師走上創業之路。可是等到真的開始創業,才發現這條路並不容易.我總結了一下,由於程式設計...