使用大資料,就像在沙子裡淘金

2021-09-30 22:00:17 字數 2089 閱讀 6620

怎樣的大資料才意味著突破

在過去幾年,我們這個世界上的資料的增長速度,相當於之前5年、10年的50倍。

大資料為什麼在這個點上爆發?主要原因是,摩爾定律使得儲存的資料量空前擴張。與此同時,類似rfid那樣的感測器技術也得到了質的提公升。於是,就出現了這樣的例子——

當某著名服飾品牌把rfid的晶元放在衣服上,如果你覺得一件衣服挺好看,拿到試衣間試,試完了卻沒買,晶元依然能記錄下你試穿了多長時間。由此,他們就會去研究,到底是什麼問題,讓你沒有選擇他們的產品。至於你試都不試,他們則認為這很可能是店鋪陳列擺放的問題。基於由上述這些資料收集而產生的質量管理和服務改進,這家店的銷售額在過去10年裡漲了5倍,非常可觀。

另外乙個例子,如今也非常有名了。美國第二大連鎖百貨target將大資料運用於營銷。某天有一位父親特別生氣,到店裡來投訴。他說我的女兒只有14歲,可是你們給她推送母嬰廣告。結果過了乙個星期,經理打**回訪這個父親,這位父親表達了歉意:上次是我態度不好,我的女兒是懷孕了。事實就是這樣:如果你總是在**上買生活用品,你們家什麼時候需要買手紙了,馬雲可能比你的家人知道得還早。

隨著上面的例子越來越多,有人開始認為,我們現在正處在人類歷史上的又乙個節點:機器的智慧型有可能在我們這個時代超過人的智慧型。

這種推理是怎麼來的呢?

持上述觀點的人認為:由於計算機的速度會不斷增加,而人的能力發展基本上是平行的,所以未來某個時間點上,機器智慧型極有可能超過人的智慧型。這時,如果我們善於利用大資料的特徵,可以達成兩件事。其一,可以換一種思維方式來看待世界。其二,可以製造更先進的機器智慧型。

換言之,大資料就像在一堆沙子裡面淘金。當你利用到相較於今日一萬倍的資料時,量變到質變的躍公升就很可能產生。從這個意義上來講,未來所有的公司,都可能是要使用大資料的公司。

真正的受益者不會超過2%

在大資料時代,很多商業模式也會變。比如,過去有乙個「吉利模式」,買乙個刀架送乙個刀片。然後吉利靠消費者後期的耗材消費掙錢。可如今,乙個冰箱品牌做了這麼一件事。它內置於冰箱的晶元可以獲知你家有多少牛奶、多少雞蛋。當這些東西沒了,它就會通知給你送來。換言之,這個冰箱除了冷凍功能,還被賦予了「貨架」功能。

未來世界裡的大資料思維,將細到每乙個人、每乙個商品、每一筆交易,逐漸影響我們的生活,改變整個生態鏈。與此同時,技術的發展也不可能人為地停止下來。

但很遺憾的是,在任何一次重大的技術革命中,一開始受益的都是2%的人。正如蒸汽機的發明,第一波受益的,是發明家、工廠主,這是18世紀晚期的事。但連英國維多利亞女王迎來她特別榮耀的時代,都是19世紀中期的事了。美國工業革命,受益的是愛迪生。如今特斯拉也掙了很多錢,受益的是支援他們的gp摩根以及各種關聯製造商。老百姓什麼時候開始受益呢?是不是過兩年,其餘98%的人就能受益了呢?不是,可能要經過兩代人,半個世紀後,才能有98%的人受益。

美國it革命,從摩爾定律的發明到今年正好是51年,很多人還沒有受益。美國和中國很幸運,踏準了資訊革命的節奏。但在我們的周圍,南美洲、整個阿拉伯地區、東歐地區,甚至南歐,對it革命的貢獻幾乎為零。我希望大家能看到站在你們後面的這98%的人。你們要關注這些,更要堅守住這2%的位置。

學習是一輩子的事

前一陣谷歌的alphago非常火,於是有人問,alphago的學習速度太驚人了,和以前的學習方法相比,未來年輕人的學習,是否只剩下思維模式上的突破?

後來我乙個同事,他的孩子在學下棋,他就說那我們去把alphago這個程式開啟,看看它到底怎麼下的,讓孩子學學。結果開啟一看,發現根本沒法模仿,裡面就是乙個很簡單的數學模型,然後一堆亂七八糟的數字。所以,機器產生智慧型和人產生智慧型完全是兩回事。但我想講兩點——

第一,機器最擅長的工作還是重複性。alphago 差不多有50個左右的版本,有時候一天就下好幾千盤棋。但人類最重要的乙個能力是創造力。在我們祖先活下來的地方,比如走出非洲那會兒,除了生存,還有樂器、創造性和想象力。

第二,比學習方法、思維模式更重要的,其實是終身學習。學習是一輩子的事,這點最重要。我原來周圍有一些人比我的學業能力要強一些,但他們一旦拿到博士,就把書本一扔,從此不再學習,慢慢他們的知識就老化了。而我雖然不是乙個有很好學習方法的人,卻是乙個能夠不斷學習的人。

正如你和你的父輩要掌握的技能早已不同,如今,說任何乙個專業如何好、如何壞都失之簡單。現在來講,已經很難有專業比人的壽命要短,因此,你要做好在不遠的未來換專業的準備。也許你的專業會過時,但你利用最先進的技術,比如計算機,來學習和提公升自己這件事,永遠不會過時。

使用JDBC處理大資料

在實際開發中,程式需要把大文字或二進位制資料儲存到資料庫。基本概念 大資料也稱之為lob large objects lob 又分為 clob 和blob clob用於儲存大文字。text blob用於儲存二進位制資料,例如影象 聲音 二進位製文等。對mysql 而言只有 blob 而沒有 clob...

使用JDBC處理大資料

在實際開發中,程式需要把大文字或二進位制資料儲存到資料庫。大資料也稱之為lob large objects lob又分為 clob和blob clob用於儲存大文字。text blob用於儲存二進位制資料,例如影象 聲音 二進位製文等。對mysql而言只有blob,而沒有clob,mysql儲存大文...

什麼是大資料,企業如何正確使用大資料

如今大資料已經成為了大家口中的熱門話題,很多企業能夠對其進行合理的挖掘使用,產生良好的商業價值。但是有一些企業依然不知道或者不能夠正確的使用它。那麼,我們要怎麼合理並且以一種合適的方式加以開發 使用大資料這一寶貴的資源呢?在正確的使用大資料之前,我們首先要了解什麼是大資料,什麼是資料。很多人對於資料...