【計(jì)世網(wǎng)】“四問(wèn)大數(shù)據(jù)”北理工計(jì)算機(jī)學(xué)院副教授張華平接受采訪
發(fā)布日期：2013-10-01 閱讀次數(shù)：
來(lái)源：計(jì)世網(wǎng) 編輯：黨委宣傳部
原文鏈接：http://www.ccw.com.cn/article/view/34925
大數(shù)據(jù)是不是大忽悠,？上馬大數(shù)據(jù)需要準(zhǔn)備啥,？大數(shù)據(jù)平臺(tái)怎樣選擇,？大數(shù)據(jù)安全如何保證,？
大數(shù)據(jù)火了起來(lái),，甚至在前不久召開(kāi)的2013夏季達(dá)沃斯論壇上還專門(mén)舉辦了一場(chǎng)關(guān)于“大數(shù)據(jù)概念是否被過(guò)度炒作”的辯論會(huì),，其火熱程度可見(jiàn)一斑,。
根據(jù)計(jì)世資訊2013年3月發(fā)布的中國(guó)大數(shù)據(jù)市場(chǎng)調(diào)查報(bào)告顯示,，相較2011年,，2012年中國(guó)大數(shù)據(jù)市場(chǎng)規(guī)模增長(zhǎng)52.4%,，達(dá)到3.2億元。預(yù)計(jì)到2017年,，中國(guó)大數(shù)據(jù)市場(chǎng)的年增長(zhǎng)率都將超過(guò)60%,，到2017年，達(dá)到37.9億元的市場(chǎng)規(guī)模,，在經(jīng)濟(jì),、整體IT市場(chǎng)低迷的情況下,，實(shí)現(xiàn)大幅逆勢(shì)增長(zhǎng)。
在日前由《計(jì)算機(jī)世界》報(bào)主辦的“大數(shù)據(jù)時(shí)代的商業(yè)智能高峰論壇”上,，來(lái)自IT廠商的代表,、業(yè)內(nèi)專家、資深分析師及用戶代表就大數(shù)據(jù)熱門(mén)話題展開(kāi)了激烈的討論,。
焦點(diǎn)一：大數(shù)據(jù)是不是大忽悠,？
IT技術(shù)的每一次更新迭代都面臨同樣的問(wèn)題，前兩年的云計(jì)算,、如今的大數(shù)據(jù)無(wú)不如此,。實(shí)際上我們回過(guò)頭來(lái)看，所有的技術(shù)和產(chǎn)業(yè)的發(fā)展都有泡沫化的過(guò)程,，包括互聯(lián)網(wǎng),、金融危機(jī)、云計(jì)算,、大數(shù)據(jù),，都會(huì)有一個(gè)泡沫化的過(guò)程，而泡沫破滅的過(guò)程也正是這項(xiàng)技術(shù)落地的過(guò)程,。
大數(shù)據(jù)熱起因是其可以產(chǎn)生更多的價(jià)值,，而在當(dāng)前這個(gè)時(shí)間點(diǎn)熱，一方面是越來(lái)越多的人意識(shí)到了其中的價(jià)值,，另一方面則與技術(shù)的發(fā)展成熟密不可分,。戴爾云計(jì)算及大數(shù)據(jù)高級(jí)解決方案架構(gòu)師郝繼玖和EMC資深技術(shù)顧問(wèn)楊永波在這個(gè)問(wèn)題上所持的觀點(diǎn)基本相同，他們認(rèn)為并不是之前沒(méi)有大數(shù)據(jù),，而是沒(méi)有能力處理,。當(dāng)下這個(gè)時(shí)間點(diǎn)一方面是數(shù)據(jù)規(guī)模確實(shí)越來(lái)越大，而另一方面計(jì)算能力也達(dá)到了一定的水平,，當(dāng)這兩者都具備的時(shí)候,，才催生了大數(shù)據(jù)時(shí)代的到來(lái)。
作為用戶代表,，IDG集團(tuán)中國(guó)區(qū)副總裁,、計(jì)世傳媒集團(tuán)董事許偉明表示認(rèn)同，他認(rèn)為主要是當(dāng)前IT系統(tǒng)的計(jì)算能力和成本都已經(jīng)降低到了可以負(fù)擔(dān)的水平,，由此推動(dòng)了大數(shù)據(jù)的快速發(fā)展,。
作為大數(shù)據(jù)領(lǐng)域的專家，北京理工大學(xué)計(jì)算機(jī)學(xué)院院長(zhǎng)助理,、大數(shù)據(jù)搜索與挖掘?qū)嶒?yàn)室主任張華平副教授表達(dá)了他的看法,。他表示，雖然當(dāng)前大數(shù)據(jù)還停留在泡沫階段，不過(guò)大數(shù)據(jù)的泡沫不會(huì)比云計(jì)算大,，因?yàn)樵朴?jì)算更多涉及的是架構(gòu)問(wèn)題,，業(yè)內(nèi)分歧比較多，而大數(shù)據(jù)關(guān)注的只是業(yè)務(wù),，更加專注,，因此也會(huì)更快地實(shí)現(xiàn)落地。
焦點(diǎn)二：上馬大數(shù)據(jù)要做哪些準(zhǔn)備,？
根據(jù)計(jì)世資訊發(fā)布的大數(shù)據(jù)市場(chǎng)調(diào)研報(bào)告顯示,，未來(lái)半數(shù)以上的企業(yè)會(huì)采用大數(shù)據(jù)解決方案。用戶如果真的要部署大數(shù)據(jù)解決方案,，要做哪些準(zhǔn)備,？
了解需求、獲得老板的認(rèn)可,，是首先要考慮的,。許偉明認(rèn)為，從公司角度來(lái)看,，最大的問(wèn)題是如何獲得老板的支持,；而從業(yè)務(wù)層面出發(fā)，則需要考慮實(shí)際的需求,。比如你所處的企業(yè)如果數(shù)據(jù)量很大,，則需要在IT架構(gòu)上做準(zhǔn)備，考慮包括數(shù)據(jù)是怎么收集的,、從哪里收集,、如何與其他數(shù)據(jù)進(jìn)行匹配等問(wèn)題。而在操作過(guò)程中,，則可以首先嘗試一些開(kāi)源的工具進(jìn)行小范圍測(cè)試,，做一些基本了解，然后再找相關(guān)的專家仔細(xì)進(jìn)行評(píng)估,。
這僅僅是最基礎(chǔ)的部分，在此之上,，企業(yè)還要將項(xiàng)目與整體業(yè)務(wù)緊密地聯(lián)系在一起,。因?yàn)槿绻皇菃为?dú)考慮某一部分的業(yè)務(wù)，失敗的概率非常大,。楊永波表示,，從IT架構(gòu)層面來(lái)講，很多數(shù)據(jù)的獲取并不容易,，打通所有層級(jí),、部門(mén)的數(shù)據(jù)是比較難的，但是只有把信息打通了，才擁有了真正的大數(shù)據(jù),。
郝繼玖則進(jìn)一步做了補(bǔ)充：“大數(shù)據(jù)相應(yīng)的IT架構(gòu)搭建完成后,，還需要考慮服務(wù)的標(biāo)準(zhǔn)化，因?yàn)殡S著數(shù)據(jù)量,、設(shè)備及人員的增加,，如何分工、保證高質(zhì)量的運(yùn)維效果是需要迫切考慮的問(wèn)題,，這個(gè)過(guò)程就需要建立統(tǒng)一的服務(wù)標(biāo)準(zhǔn)和流程,。”
除了技術(shù)層面的問(wèn)題外，還有一個(gè)很大的問(wèn)題就是隱私問(wèn)題,。張華平講到,，現(xiàn)在有很多大數(shù)據(jù)隱私被濫用的問(wèn)題，無(wú)論從國(guó)家還是公司層面來(lái)講,，要想把大數(shù)據(jù)做好,，都面臨數(shù)據(jù)公開(kāi)的問(wèn)題，需要各個(gè)部門(mén)數(shù)據(jù)的融合,。因此,，利用大數(shù)據(jù)的時(shí)候，要考慮隱私的問(wèn)題,。另外,，還需要考慮數(shù)據(jù)本身的生命周期問(wèn)題，有一些老的或者過(guò)時(shí)的數(shù)據(jù),，可能對(duì)你最后的分析結(jié)果產(chǎn)生特別糟糕的影響,。因此，專業(yè)的人才不可或缺,，應(yīng)該有一些數(shù)據(jù)分析師,，或者跟業(yè)務(wù)相關(guān)的數(shù)據(jù)科學(xué)家對(duì)數(shù)據(jù)進(jìn)行分析。
焦點(diǎn)三：用開(kāi)源平臺(tái)還是商業(yè)軟件,？
一提到大數(shù)據(jù)很多人會(huì)想到Hadoop,。作為開(kāi)源平臺(tái)的忠實(shí)支持者，張華平認(rèn)為做開(kāi)源和共享平臺(tái),，從最終的情況來(lái)看,，獲取的價(jià)值更大。因?yàn)殚_(kāi)源軟件參與的用戶多,，反饋多,，更容易改進(jìn)和完善。
不過(guò),，楊永波并不這么看,，他認(rèn)為Hadoop不等于大數(shù)據(jù),，針對(duì)非結(jié)構(gòu)化數(shù)據(jù)的分析，Hadoop是比較好的平臺(tái),，也是現(xiàn)在被廣泛接受的平臺(tái),。但也正因?yàn)槠涫情_(kāi)源平臺(tái)，也存在一些弊端,，比如服務(wù)質(zhì)量無(wú)法保證,。另外，Hadoop有很多版本,，要真正實(shí)現(xiàn)商用,，需要用戶具備足夠高的技術(shù)水平。因此,，用戶在選擇時(shí)并不能一味追求開(kāi)源,，需要綜合考慮自己的情況。
對(duì)此,，許偉明表示認(rèn)同楊永波的觀點(diǎn),，他認(rèn)為無(wú)論是開(kāi)源還是商業(yè)軟件，最重要的還是服務(wù)質(zhì)量,、服務(wù)速度,，不能一味考慮成本問(wèn)題。
郝繼玖表示：“大數(shù)據(jù)發(fā)展速度越來(lái)越快,，給IT市場(chǎng)帶來(lái)的空間也越來(lái)越大,。因此，在開(kāi)源平臺(tái)方面,，我們一直在積極參與,，推動(dòng)行業(yè)的發(fā)展。戴爾并不提供大數(shù)據(jù)運(yùn)行平臺(tái),，提供的只是其中的計(jì)算能力,。”
焦點(diǎn)四：大數(shù)據(jù)時(shí)代，安全如何保證,？
大數(shù)據(jù)并沒(méi)有人排斥,，但在記者采訪過(guò)程中，經(jīng)常有用戶問(wèn)這樣的問(wèn)題：如何保證我的信息安全,，如果無(wú)法保證安全,，大數(shù)據(jù)還上不上？對(duì)此,，張華平一語(yǔ)中的，“我們不會(huì)因?yàn)楦哞F出事不坐高鐵,，不會(huì)因?yàn)轱w機(jī)出事不坐飛機(jī),，大數(shù)據(jù)是科技發(fā)展的趨勢(shì),，但要把握好方向，這需要法律的完善,。”
張華平的觀點(diǎn)得到了與會(huì)嘉賓的贊同,。郝繼玖認(rèn)為，數(shù)據(jù)是把雙刃劍,。消費(fèi)者網(wǎng)購(gòu)時(shí)需要提供家庭地址,，才能給你運(yùn)過(guò)來(lái)，這是經(jīng)過(guò)同意獲取你的信息,，因?yàn)橛辛己玫姆森h(huán)境進(jìn)行統(tǒng)一管理,，所以買(mǎi)家不用那么擔(dān)心；而生活中很多時(shí)候是濫用信息的收集,，是在用戶不知情的情況下搜集你的信息,，這就需要相應(yīng)立法進(jìn)行保護(hù)。大數(shù)據(jù)也是類似的,，只讓適合的人利用我的數(shù)據(jù),。另外，關(guān)于大數(shù)據(jù)的報(bào)道,，未來(lái)也要有嚴(yán)格的法律保護(hù)體系,，保證我的數(shù)據(jù)不被泄露出去。
許偉明還在此基礎(chǔ)上提到了平衡,，他講到,，一個(gè)信息點(diǎn)傳播出去，對(duì)某個(gè)人而言,，可能是隱私受到了侵犯,，但從另一個(gè)角度來(lái)看，你把互聯(lián)網(wǎng)當(dāng)成是一個(gè)系統(tǒng),，你不斷地訓(xùn)練這個(gè)系統(tǒng),，讓其更好地為你服務(wù)，其實(shí)也不是壞事,。“我們做媒體的,，研究的大數(shù)據(jù)就包括精準(zhǔn)的廣告投放。比如在你閱讀的時(shí)候,，獲得了你想要的廣告信息,，對(duì)用戶而言也不是壞事。再比如你在研究旅行的時(shí)候,，給你一些旅行社的信息,，或者給你一些比較便宜的飛機(jī)票等，相信客戶還是愿意看的,。實(shí)際上你可以有意識(shí)地泄露一些你的信息,，這樣系統(tǒng)會(huì)分析你的數(shù)據(jù),，真正地幫助你，所以我覺(jué)得沒(méi)必要恐懼,。而惡意的信息收集,、未經(jīng)用戶允許收集的信息，都是違法的,。這其中就需要平衡,，不能因?yàn)橛锌赡鼙恍孤峨[私就不用大數(shù)據(jù)。”
（審核：王征）
分享到：
