11月24日，由ZDNet至頂網(wǎng)主辦，英特爾協(xié)辦、VMware和SAS支持的主題為“大數(shù)據(jù)•政府決策的科學(xué)發(fā)展觀”的第五屆政務(wù)信息化高峰論壇在昆山舉行。多位政務(wù)信息化專家、大數(shù)據(jù)實(shí)踐精英及IT界意見領(lǐng)袖出席了會(huì)議，并在會(huì)上就大數(shù)據(jù)在政務(wù)信息化中的實(shí)際應(yīng)用等問題進(jìn)行了深入交流。其中，英特爾行業(yè)合作與解決方案部中國(guó)大區(qū)總監(jiān)凌琦在會(huì)上表示，大數(shù)據(jù)已經(jīng)成為整個(gè)業(yè)界的發(fā)展方向，并且在技術(shù)和用戶的角度還有很多需要探討，大數(shù)據(jù)已經(jīng)引發(fā)了新一輪的信息革命。
英特爾行業(yè)合作與解決方案部中國(guó)大區(qū)總監(jiān) 凌琦
大數(shù)據(jù)面臨處理難題
Gartener早在2010年分析得出信息將成為21世紀(jì)的石油，同年The Economist也發(fā)表觀點(diǎn)稱，數(shù)據(jù)日益成為商業(yè)的新源材料“一種與資本和勞動(dòng)力并列的新經(jīng)濟(jì)元素”。
數(shù)據(jù)量大、規(guī)模大、速度快是大數(shù)據(jù)的三大特征。在2011年兩天的數(shù)據(jù)量就達(dá)到了1.8ZB，這相當(dāng)于文明起始到2003年的整個(gè)數(shù)據(jù)量。除了人所產(chǎn)生數(shù)據(jù)外，機(jī)器數(shù)據(jù)即物聯(lián)網(wǎng)數(shù)據(jù)也在逐年遞增。
我們看到的數(shù)據(jù)大概80%以上是非結(jié)構(gòu)化數(shù)據(jù)，只有20%是結(jié)構(gòu)化的數(shù)據(jù)，結(jié)構(gòu)化數(shù)據(jù)可以用結(jié)構(gòu)化數(shù)據(jù)的關(guān)系型數(shù)據(jù)庫(kù)可以處理，非結(jié)構(gòu)化數(shù)據(jù)就要依賴于新的技術(shù)來(lái)處理。凌琦指出，過去傳統(tǒng)處理結(jié)構(gòu)化數(shù)據(jù)所使用的關(guān)系型數(shù)據(jù)庫(kù)，它的規(guī)模完全沒有辦法處理，所以要使用并行式數(shù)據(jù)庫(kù)、分布式數(shù)據(jù)庫(kù)等各種方法，采用一些新的架構(gòu)來(lái)處理這些問題。
從規(guī)模上看，很多應(yīng)用沒有進(jìn)行大數(shù)據(jù)處理，這些非結(jié)構(gòu)化數(shù)據(jù)能夠得到分析會(huì)大大提高效率。例如，在檢查汽車套牌上，大數(shù)據(jù)處理可以把所有數(shù)據(jù)進(jìn)行對(duì)比，并在短時(shí)間里找到車輛的顏色、型號(hào)是否符合，再反饋給在場(chǎng)的執(zhí)勤的警察。凌琦表示，像這一類問題都是有實(shí)時(shí)性、數(shù)據(jù)規(guī)模、數(shù)據(jù)多樣性的非結(jié)構(gòu)化數(shù)據(jù)居多，傳統(tǒng)的數(shù)據(jù)庫(kù)是沒有辦法處理的。
此外，大數(shù)據(jù)正在快速涌現(xiàn)生出態(tài)系統(tǒng)。凌琦表示，大數(shù)據(jù)業(yè)務(wù)實(shí)際上才剛剛開始，這對(duì)于整個(gè)業(yè)界是非常大的挑戰(zhàn)。新技術(shù)、新人員和技能提供最佳實(shí)踐，在這樣的商業(yè)模式下變成一個(gè)可盈利可持續(xù)的業(yè)務(wù)。使企業(yè)和組織有能力對(duì)大量的、不斷增長(zhǎng)的、多樣的、多維的、結(jié)構(gòu)化以及非結(jié)構(gòu)化數(shù)據(jù)進(jìn)行管理、分析并據(jù)此采取行動(dòng)。
大數(shù)據(jù)時(shí)代 Intel的定位
目前主要的大數(shù)據(jù)行業(yè)包括電信、零售、金融服務(wù)、制造、醫(yī)療、物聯(lián)網(wǎng)、智慧城市，在這些行業(yè)里只有10%的數(shù)據(jù)。Intel看到了其中的機(jī)會(huì)，不僅僅在服務(wù)器同時(shí)也存在在網(wǎng)絡(luò)、存儲(chǔ)，以及高性能數(shù)據(jù)分析軟件中，像Hadoop這些新技術(shù)會(huì)逐漸成熟。
Intel希望在大數(shù)據(jù)時(shí)代從各方面進(jìn)行投入，將軟件的分析時(shí)間從小時(shí)縮短到秒，提高計(jì)算的性能，存儲(chǔ)結(jié)構(gòu)更加分布式、智能化并且進(jìn)行橫向擴(kuò)展，提高SSD的吞吐量，以及建立高速分布式的網(wǎng)絡(luò)結(jié)構(gòu)。在這些能夠領(lǐng)域里Intel希望為大數(shù)據(jù)處理提供一個(gè)基礎(chǔ)架構(gòu)，或一些工具。
凌琦指出，Intel也并購(gòu)了很多大數(shù)據(jù)處理以及架構(gòu)廠商，并且Intel在上海有一個(gè)團(tuán)隊(duì)專門在做Hadoop大數(shù)據(jù)處理架構(gòu)的開發(fā)。
據(jù)悉，Intel上海研發(fā)實(shí)驗(yàn)室投入了將近2000多個(gè)專業(yè)工程師在進(jìn)行開發(fā)，從前端的筆記本到后端的服務(wù)器網(wǎng)絡(luò)，其中80%的前端產(chǎn)品是在上海做研發(fā)。
Intel的創(chuàng)新能力一方面從實(shí)驗(yàn)室產(chǎn)生，一方面從市場(chǎng)的需求變化而來(lái)。“Intel希望成為整個(gè)行業(yè)的領(lǐng)頭羊，提供高效的計(jì)算芯片、存儲(chǔ)、I/O、網(wǎng)絡(luò)技術(shù)，加速大數(shù)據(jù)價(jià)值挖掘與提高決策反應(yīng)，提供最優(yōu)的軟件和工具推動(dòng)大數(shù)據(jù)應(yīng)用的部署和創(chuàng)新。促進(jìn)大數(shù)據(jù)生態(tài)系統(tǒng)的建設(shè)和與合作伙伴合作，并且投資大數(shù)據(jù)解決方案的研究和服務(wù)。”凌琦指出，最終為用戶帶來(lái)價(jià)值以及完整的解決方案。
