CIO新任務 讓大資料變得像電影一樣視覺化

2021-09-22 19:27:07 字數 676 閱讀 5866

著手寫關於資料展示的文章時,我想起了許多年前第一次聽到的一句話:機遇鍾愛有準備的頭腦。我可能是在一項必修科學課上偶然學到的,但更可能是在一本**中讀到的。通過google查詢,我知道這句話是路易斯.巴斯德說的,出自他的觀察領域的著作《dans les champs de l'observation》的序言。

但是現在,幾十年過去了,這個充斥著資料的世界卻讓我漸漸明白,有準備的頭腦可能會出現一種消極的傾向——成為洞察力的敵人。我在想乙個有準備的頭腦可能會因為太有準備,醞釀太久而導致無法產生新鮮的想法。這就是所謂的積習難改,更為嚴重的是,一旦我們的思維定型了,危險點也許就被我們忽視了。

cio們在就如何收集、儲存、分析和展示大資料開展工作的同時,還被賦予了應對更加困難的挑戰——運用資料作為驅動業務決策的手段的重任。it組織可以如何利用大資料?經過一年左右與專家和cio們的試探後,我開始認為這一努力需要cio們進入乙個以往很少有人觸及的領域:電影。

當然,如果你已經知道自己在尋找什麼,感謝你那有準備的頭腦,除了留下與少數變數相關的資訊,你只是過濾掉了其他的所有資訊。但是如果你不知道自己在尋找什麼,如果你已經有了上pb的資料,你希望從中能發現新的關係而不是簡單的為舊觀點提供支撐或反駁的證據,那會怎麼樣?如果你想看到不帶偏見處理大資料分析方式——正如我所知道的,那真是大資料分析的最高目標(the holy grail)——除了逐字逐句的看,根本沒有什麼其他選擇。但是,怎樣做呢?

BI專案記 新任務處理

首先回顧下新工作項不同階段的定義。接下來進入到開發階段,根據需求建立五個報表。開啟sql server data tools,建立乙個報表專案。建立五章報表。將報表專案檔案拖拽到source control explorer裡,放入先前定義的ssrs目錄下。檢查將要被簽入的專案。簽入專案,可以在te...

BI專案記 新任務處理

上一篇主要介紹如何借助tfs建立乙個新的工作項,此篇主要演示如何對其進行處理。首先回顧下新工作項不同階段的定義。接下來進入到開發階段,根據需求建立五個報表。開啟sql server data tools,建立乙個報表專案。建立五章報表。將報表專案檔案拖拽到source control explore...

yarn集群無法提交新任務記錄始末

測試通知,hive提交的mr任務卡住乙個小時,無法執行。測試使用的是頁面應用提交的任務,先確定是否是應用的問題。在yarn webui檢視,發現任務已經提交到yarn中,處於accepted狀態。確定應用已經將任務正常提交。檢視ambari介面hive元件,無報錯。在hive客戶端執行簡單查詢命令,...