《大數據時代》數據智能(néng)是大數據的未來
大數據蹒跚前行,邁進(jìn)下半場
随著(zhe)2012年維克托·邁爾-舍恩伯格《大數據時代》一書的出版,“大數據”這(zhè)一概念乘著(zhe)互聯網的浪潮在各行各業中扮演了舉足輕重的角色,得大數據者得天下,業界紛紛用大數據這(zhè)個詞來描述和定義信息爆炸時代産生的海量數據,并命名與之相關的技術發(fā)展與創新。
2013年被(bèi)稱爲中國(guó)的“大數據元年”,大數據開(kāi)始在我國(guó)流行,以勢不可擋的姿态進(jìn)入人們的思想意識,并在社會的各個領域探索與落地實踐。塗子沛的《大數據》一時成(chéng)爲暢銷讀物,大數據的概念風行大江南北,阿裡(lǐ)巴巴成(chéng)爲最早提出通過(guò)數據進(jìn)行企業數據化運營的企業。2015年,我國(guó)政府通過(guò)了《關于促進(jìn)大數據發(fā)展的行動綱要》,大數據更是上升爲國(guó)家戰略。
同美國(guó)市場一樣(yàng),以Hadoop爲代表的大數據技術,在中國(guó)的大數據産業中也經(jīng)曆了一段狂熱期,在很長(cháng)一段時期内,Hadoop幾乎成(chéng)了大數據的代名詞。在這(zhè)個數據大爆炸的時代,企業需要對(duì)海量數據存儲、快速處理和分析,Hadoop正是爲此而生。但目前看來,這(zhè)股浪潮正漸漸退去,Hadoop正在逐漸變成(chéng)一項傳統技術。
從誕生到現在,Hadoop已經(jīng)走過(guò)十多年的曆史,但近年來,以Hadoop爲代表的大數據産業生态,在實際落地中卻面(miàn)臨著(zhe)尴尬的局面(miàn)。首先,大數據的價值被(bèi)誇大,在投入産出比上差強人意。其次,中小企業對(duì)大數據的應用極爲有限。目前看來,需求主要來源于一些大型企業,數據量過(guò)大,數據分析需求旺盛,但中小企業自身數據量并不大,需求度較低,同時也缺少相應的大數據技術人才。最後(hòu),大數據管理難度大,數據開(kāi)放共享、數據質量、數據安全、個人隐私信息保護等已經(jīng)成(chéng)爲管理大數據最頭疼的問題。今年5月,歐盟數據保護法規《通用數據保護條例》發(fā)布,對(duì)大數據企業采集的個人隐私數據管理工作産生極大的挑戰。
2018年10月底,IBM宣布以高達340億美元的價格收購Red Hat,IBM宣稱其將(jiāng)成(chéng)爲全球的頭号混合雲提供商,而亞馬遜、微軟、阿裡(lǐ)巴巴等雲計算巨頭早已將(jiāng)計算、存儲、網絡資源和應用軟件(大多來自開(kāi)源社區)作爲在線雲服務來提供,Anaconda産品和營銷高級副總裁Mathew Lodge指出,大數據的中心已經(jīng)從Hadoop轉移到了雲端,在雲環境下的對(duì)象存儲系統(如亞馬遜 S3、微軟Azure Blob Storage和Google Cloud Storage)中存儲數據比在HDFS中便宜了5倍。
盡管現在就談Hadoop已死爲時尚早,但大數據産業面(miàn)臨的以上問題已經(jīng)累積很久,也沒(méi)有被(bèi)很好(hǎo)地解決,能(néng)否解決以上問題將(jiāng)直接關乎大數據的未來發(fā)展。
人工智能(néng)方興未艾,取得新突破
人工智能(néng)(AI)是研究用于模拟與延伸擴展人的智能(néng)的理論、方法、技術及應用系統的一門新的技術科學(xué),目前在商業和生活中已有大量應用場景,被(bèi)産業界寄望爲下一輪技術革命,對(duì)它的關注熱度已經(jīng)超過(guò)大數據。
AI的發(fā)展曆程一波三折,呈螺旋式發(fā)展,在曆史上共經(jīng)曆三個時期。首先是1956年達特茅斯會議提出了AI的概念,但當時的計算機處理性能(néng)和數據容量制約了AI技術的發(fā)展。然後(hòu)在20世紀80年代,專家系統興起(qǐ),AI算法模型有了重大發(fā)明,包括多層神經(jīng)網絡和BP反向(xiàng)傳播算法的提出,出現了能(néng)與人類下象棋的高度智能(néng)機器,但随著(zhe)台式機的出現,使得AI專家系統走向(xiàng)沒(méi)落。再往後(hòu)就是2006年,Hinton論文開(kāi)啓了深度學(xué)習時代,特别是2016年,AIphaGo大敗李世石,將(jiāng)AI從後(hòu)台推到了科技界的聚光燈下,一時間萬衆矚目。