來源: 中國科技網(wǎng) 作者: 王怡
依然漂泊在外的斯諾登讓美國“棱鏡門”事件懸而未決,也使得“大數(shù)據(jù)”“云計(jì)算”這兩個(gè)時(shí)髦的詞匯以一種并不光彩的方式出現(xiàn)在人們的視野中。
“棱鏡”計(jì)劃通過對(duì)美國九家主要的互聯(lián)網(wǎng)公司所掌控的用戶的音頻、視頻、郵件等10類信息進(jìn)行數(shù)據(jù)及文本的挖掘,從而分析出個(gè)人的聯(lián)系方式以及行動(dòng)。值得注意的是,“棱鏡”每天所要面對(duì)的天量的“10類信息”便是標(biāo)準(zhǔn)的“大數(shù)據(jù)”。在網(wǎng)絡(luò)以及媒體對(duì)“棱鏡門”進(jìn)行鋪天蓋地的口誅筆伐以及對(duì)爆料者最終去向不斷猜測(cè)之時(shí),探討大數(shù)據(jù)能為我們帶來什么似乎更有意義。本報(bào)記者特就它影響我們生活的方方面面,采訪了有關(guān)專家,同時(shí)推出上下輯,探討與大數(shù)據(jù)有關(guān)的那些事兒。
不僅“大”,與之配套的分析能力更“強(qiáng)大”
在提到大數(shù)據(jù)這一概念時(shí),微軟云計(jì)算中國區(qū)總監(jiān)沈寓實(shí)特別強(qiáng)調(diào):“我們所說的大數(shù)據(jù),并不只是數(shù)據(jù)‘大’這一概念,這是信息和資源兩個(gè)概念的區(qū)別,數(shù)據(jù)可以看作是信息,大數(shù)據(jù)則是可以用來分析和參考的有效資源。”
大數(shù)據(jù)的“大”一方面是數(shù)據(jù)絕對(duì)數(shù)量的急劇增長(zhǎng)。IBM全球副總裁胡世忠在IBM2013大數(shù)據(jù)與分析高峰論壇上談到:“十年前我們把一些數(shù)據(jù)量做GB,現(xiàn)在數(shù)據(jù)每個(gè)月發(fā)生變化,我們把它達(dá)到PB的數(shù)量,每天差不多25個(gè)PB的數(shù)據(jù)。”
在計(jì)算機(jī)世界中1PB是1024TB, 1TB又是1024GB。為何在大數(shù)據(jù)的時(shí)代,數(shù)據(jù)出現(xiàn)了這般爆炸式的增長(zhǎng)?這就要提到大數(shù)據(jù)的“大”的另外一層含義:更廣的信息范圍。
IBM全球企業(yè)咨詢服務(wù)部大中華區(qū)總經(jīng)理段仰圣談道:“企業(yè)數(shù)據(jù),實(shí)時(shí)數(shù)據(jù)還有社交媒體的數(shù)據(jù)都包括在大數(shù)據(jù)范圍內(nèi)。我們的購物記錄,在搜索引擎上的搜索記錄被整合起來后都可以成為有用的數(shù)據(jù)。也就是說,我們?cè)谡鎸?shí)生活以及社會(huì)交往的過程中的點(diǎn)點(diǎn)滴滴都可以被‘數(shù)據(jù)化’。很多數(shù)據(jù),比如社交媒體的數(shù)據(jù)是以文本的形式存儲(chǔ),這也一定程度上體現(xiàn)了信息范圍的擴(kuò)大也是數(shù)據(jù)絕對(duì)數(shù)量增長(zhǎng)的重要原因。”
正如沈寓實(shí)所說,大數(shù)據(jù)并不是簡(jiǎn)單描述數(shù)據(jù)數(shù)量的龐大與來源的廣泛,它更強(qiáng)調(diào)的是與之相配套的強(qiáng)大的分析能力。沒有從天量數(shù)據(jù)中披沙揀金的分析能力,空有龐大的數(shù)據(jù)只會(huì)變成“數(shù)據(jù)墳?zāi)?rdquo;。
胡世忠簡(jiǎn)明扼要的把上述大數(shù)據(jù)的特點(diǎn)描述成4個(gè)“V”,V代表了數(shù)據(jù)的數(shù)量、速度、多樣性、真實(shí)性。這四個(gè)V涵蓋了大數(shù)據(jù)最主要的方面:數(shù)據(jù)量大,數(shù)據(jù)來源廣形態(tài)多,分析數(shù)據(jù)速度快能力強(qiáng),來源真實(shí)。
未來,生活點(diǎn)滴都被數(shù)據(jù)化
大數(shù)據(jù)到底會(huì)帶給我們什么?記者采訪的幾家從事大數(shù)據(jù)研發(fā)的公司,都在從事著與智慧城市相關(guān)的大數(shù)據(jù)研發(fā)。
天云大數(shù)據(jù)正在依照紐約311熱線項(xiàng)目,為北京政府了解民情提供參考。
“我們通過收集到的碎片信息,進(jìn)行綜合分析,依據(jù)實(shí)時(shí)監(jiān)測(cè)公共數(shù)據(jù),聚會(huì)分類各種相關(guān)民情,對(duì)數(shù)據(jù)進(jìn)行提煉分類和可視化,”天云大數(shù)據(jù)副總裁雷濤介紹說:“在對(duì)北京東城區(qū)進(jìn)行智慧城市網(wǎng)格化管理的民情播報(bào):公共衛(wèi)生,公共安全,環(huán)境設(shè)施,社區(qū)養(yǎng)老,緊急事件民……通過實(shí)時(shí)監(jiān)控與分析,政府可以實(shí)時(shí)了解民情,并針對(duì)不同功能區(qū)域結(jié)合市民反映狀況進(jìn)行合理改善與治理。”
雷濤介紹說,紐約市民把311熱線看成是生活的百科全書,包括報(bào)稅、流感注射、手機(jī)賬單,出租公寓、寵物執(zhí)照,以及游泳池、公園、圖書館、體育場(chǎng)等信息。而311熱線所登錄的來電內(nèi)容,也反映出紐約市民生活百態(tài)。
311熱線讓市政當(dāng)局充分地了解民情,正因?yàn)橥对V電話太多,紐約市長(zhǎng)則針對(duì)噪音問題破天荒地對(duì)紐約的狗吠修法,狗白天吠叫不可超過十分鐘,但若是在晚間,不得超過五分鐘,主人如不能在規(guī)定時(shí)間內(nèi)使狗平靜下來,將會(huì)因違反噪音管制法吃上罰單。至于全美國行之有年的冰淇淋販賣車,各地都是播放傳統(tǒng)的童謠音樂,這童謠形同冰淇淋車的標(biāo)準(zhǔn)音樂,但是因不少民眾投訴音樂吵人,于是紐約市長(zhǎng)規(guī)定冰淇淋車子不得播放童謠,僅能以手搖鈴來招攬客人。
“紐約,這個(gè)美國最大的城市擁有820萬人口,每天產(chǎn)生大量的數(shù)據(jù),其中大部分?jǐn)?shù)據(jù)位于很多市政機(jī)構(gòu)和部門的高度分散的孤島中,如何有效的利用就成了解決問題的關(guān)鍵,”雷濤說:“大數(shù)據(jù)不僅僅能為企業(yè)所用,還可以幫助政府了解民情。大數(shù)據(jù)技術(shù)不僅僅可以替代傳統(tǒng)信息系統(tǒng),更重要的是大數(shù)據(jù)擁有前所未有的計(jì)算能力,語義計(jì)算,行為計(jì)算,視覺計(jì)算,可以得心應(yīng)手的處理以前難以處理甚至無法處理的數(shù)據(jù)。”
IBM全球副總裁兼大中華區(qū)軟件集團(tuán)總經(jīng)理胡世忠也就大數(shù)據(jù)如何解決交通問題提出了自己的設(shè)想。
“北京的交通問題是非常大的,如果可以提供一些數(shù)據(jù)的分析,讓這個(gè)城市能夠更好地了解在一天的什么時(shí)間,有很大的公共交通的情況,或者在某一個(gè)時(shí)間某條公路上的一些情況,這對(duì)于我們物流方面的交通有很大幫助。以此類推,對(duì)于政府來說,比如水資源的管理,電網(wǎng)的管理,在大數(shù)據(jù)的分析之后,都將有一個(gè)完美的管理方式。”胡世忠說。
怎樣搭上大數(shù)據(jù)這班快車
——與大數(shù)據(jù)有關(guān)的那些事兒(下)
來源: 科技日?qǐng)?bào) 作者: 姜晨怡
大數(shù)據(jù)是個(gè)好概念。據(jù)海外媒體報(bào)道,美國市場(chǎng)研究公司Forrester日前公布了一份關(guān)于客戶數(shù)據(jù)管理的研究報(bào)告。結(jié)果顯示,大數(shù)據(jù)雖然是不可逆轉(zhuǎn)的趨勢(shì),但絕不是一劑萬能良藥。在這份名為《未來客戶數(shù)據(jù)管理之憂患》中提到,分析人士就未來客戶數(shù)據(jù)分析的前景進(jìn)行預(yù)測(cè),涵蓋諸多重點(diǎn),其中最受關(guān)注的焦點(diǎn)是數(shù)據(jù)來源問題。隨著移動(dòng)終端設(shè)備的廣泛普及,數(shù)據(jù)來源變得越來越多元。一方面必須尊重和保護(hù)數(shù)據(jù)擁有者的隱私,另一方面必須對(duì)同一個(gè)人利用多個(gè)移動(dòng)終端設(shè)備發(fā)出的數(shù)據(jù)進(jìn)行整合。
發(fā)展大數(shù)據(jù)產(chǎn)業(yè)必須有明確的產(chǎn)業(yè)規(guī)劃。事實(shí)上,與大數(shù)據(jù)有關(guān)的行業(yè)到底有哪些?它會(huì)給我們的生活帶來哪些變革?大數(shù)據(jù)是否又“過熱”了?
海量數(shù)據(jù)幫廠商賺到更多
事實(shí)是,雖然大數(shù)據(jù)的數(shù)據(jù)來源缺乏明確標(biāo)準(zhǔn),安全性也讓人感到隱隱作痛,但這些都并不妨礙大數(shù)據(jù)在商業(yè)領(lǐng)域的成功應(yīng)用。平臺(tái)仍在搭建中,技術(shù)也正在探索中,而大數(shù)據(jù)這個(gè)聽起來有些虛幻的概念,已經(jīng)迅速地幫助廠商得到了更多實(shí)惠。
中國互聯(lián)網(wǎng)協(xié)會(huì)副秘書長(zhǎng)石現(xiàn)升以農(nóng)夫山泉舉例介紹,他們每天有一萬個(gè)業(yè)務(wù)員,其中每天每個(gè)人要到十五個(gè)銷售點(diǎn)拍十張照片,每人每天拍的照片是10兆,一萬個(gè)業(yè)務(wù)員每天的數(shù)據(jù)量就是100G,每個(gè)月就是30T,這些靠最簡(jiǎn)單的方式獲取了海量數(shù)據(jù),這是農(nóng)夫山泉大數(shù)據(jù)量獲取的來源。同時(shí)這些照片主要觀察的是各個(gè)銷售點(diǎn)怎么擺放,位置發(fā)生什么變化,以及這些變化的原因是什么,怎樣擺放水有助于銷售,不同年齡段購買量有多大,氣溫的變化對(duì)購買行為的影響,競(jìng)爭(zhēng)對(duì)手的新包裝如何等等對(duì)經(jīng)營(yíng)帶來直接的指導(dǎo)作用的信息。他們通過與SAP公司合作,采用大數(shù)據(jù)分析技術(shù)對(duì)產(chǎn)品和銷售做出快速反應(yīng),由24小時(shí)縮短至0.67秒,同時(shí)提供精準(zhǔn)物流服務(wù),物流配送效率得到極大提升,效益提升使市場(chǎng)占有率是34.8%,年增長(zhǎng)率達(dá)到30%到40%。
在互聯(lián)網(wǎng)行業(yè),大數(shù)據(jù)帶來的變化明顯的一點(diǎn)就是精準(zhǔn)的廣告投放。石現(xiàn)升介紹,傳統(tǒng)網(wǎng)絡(luò)投放是比較粗放式的網(wǎng)絡(luò)投放,但是現(xiàn)在通過搜索廣告營(yíng)銷的方式,使得廣告投放和用戶滲透更加的精準(zhǔn)。用戶看到的是他愿意看到的,投放主投放的廣告,通過搜索的方式把這些廣告內(nèi)容直接推送到用戶手上,所有一切通過海量數(shù)據(jù)分析來完成。
大數(shù)據(jù)帶動(dòng)更多產(chǎn)業(yè)提速
大數(shù)據(jù)有個(gè)陽光明媚的稱號(hào)——“新的石油”。這是因?yàn)榉N類廣泛、數(shù)量龐大、產(chǎn)生和更新速度加劇的大數(shù)據(jù)蘊(yùn)含著前所未有的社會(huì)價(jià)值和商業(yè)價(jià)值。事實(shí)上,大數(shù)據(jù)不是個(gè)單獨(dú)的產(chǎn)業(yè),由它帶動(dòng)的相關(guān)行業(yè)還包括:用以實(shí)現(xiàn)大數(shù)據(jù)存儲(chǔ)、檢索、處理、分析、展示的相關(guān)IT硬件與軟件的生產(chǎn)、銷售和租賃活動(dòng),以及相關(guān)信息服務(wù)。據(jù)賽迪分析,大數(shù)據(jù)有關(guān)行業(yè)可分為三個(gè)方面:用以搭建大數(shù)據(jù)平臺(tái)、實(shí)現(xiàn)大數(shù)據(jù)組織與管理、分析與發(fā)現(xiàn)的相關(guān)IT硬件與軟件的生產(chǎn)、銷售和租賃活動(dòng);大數(shù)據(jù)平臺(tái)的運(yùn)維與管理服務(wù)、系統(tǒng)集成、數(shù)據(jù)安全、云存儲(chǔ)等解決方案與相關(guān)咨詢服務(wù);與大數(shù)據(jù)應(yīng)用相關(guān)的數(shù)據(jù)租售業(yè)務(wù)、分析預(yù)測(cè)服務(wù)、決策支持服務(wù)、數(shù)據(jù)分享平臺(tái)、數(shù)據(jù)分析平臺(tái)等。
藍(lán)訊是一家專門做CDN即內(nèi)容分發(fā)網(wǎng)絡(luò)的公司,簡(jiǎn)而言之,他們的業(yè)務(wù)就是讓網(wǎng)絡(luò)更快更穩(wěn)定,避開那些影響網(wǎng)絡(luò)數(shù)據(jù)傳輸速度和穩(wěn)定性的環(huán)節(jié)。就是這樣的一家公司,已經(jīng)在大數(shù)據(jù)的大背景下,規(guī)劃著自己的未來。在日前舉行的“中國CDN十五年發(fā)展大會(huì)”上,香港科技大學(xué)計(jì)算機(jī)教授、藍(lán)訊首席技術(shù)顧問李波提出,隨著云計(jì)算、大數(shù)據(jù)應(yīng)用、移動(dòng)互聯(lián)網(wǎng)和社交網(wǎng)絡(luò)發(fā)展,傳統(tǒng)的CDN服務(wù)的內(nèi)涵也正在發(fā)生變化。正在從傳統(tǒng)的互聯(lián)網(wǎng)內(nèi)容加速服務(wù),向針對(duì)互聯(lián)網(wǎng)資源提供有效管理服務(wù)的方向演進(jìn)。例如如果企業(yè)需要一種定制化服務(wù),這些服務(wù)包括云計(jì)算、大數(shù)據(jù)、移動(dòng)互聯(lián)網(wǎng)和社交網(wǎng)絡(luò)的資源,那么專業(yè)CDN公司能不能以最快方式、最合理資源配置方式為用戶提供最為有效服務(wù),這將是CDN服務(wù)未來的發(fā)展方向。如何面對(duì)大數(shù)據(jù)帶來的種種挑戰(zhàn),應(yīng)該是每個(gè)處于行業(yè)中的公司都應(yīng)該思考的事情。
■ 多說一句
警惕大數(shù)據(jù)過熱帶來資源浪費(fèi)
文•本報(bào)記者 王 怡
由于有了之前“云計(jì)算”過熱的前車之鑒,現(xiàn)今處在聚光燈下的大數(shù)據(jù)也應(yīng)警惕泡沫。中國云基地創(chuàng)始人田溯寧在接受采訪時(shí)說道:“云計(jì)算和大數(shù)據(jù)的到來,對(duì)中國十分有利,它縮短了中國與世界的距離,中國有可能在這個(gè)領(lǐng)域獲得創(chuàng)新和領(lǐng)先。”
大數(shù)據(jù)或許會(huì)改變整個(gè)時(shí)代的進(jìn)程,微軟云計(jì)算中國區(qū)總監(jiān)沈寓實(shí)認(rèn)為:“大數(shù)據(jù)時(shí)代,數(shù)據(jù)將會(huì)是新能源。”紐約時(shí)報(bào)曾評(píng)論“數(shù)據(jù)將成為類似貨幣或黃金的新型經(jīng)濟(jì)資產(chǎn)”。面對(duì)如此誘人的描述,以及發(fā)展中國家在此次競(jìng)賽中并不差的排位,我們?cè)谕度霟崆榈耐瑫r(shí),還要保持冷靜。
中科院計(jì)算機(jī)研究所副研究員王斌認(rèn)為:“大數(shù)據(jù)也許會(huì)改變計(jì)算機(jī)企業(yè)的格局,原來主導(dǎo)計(jì)算機(jī)行業(yè)的要么是硬件制造者,要么是軟件制造者,也許以后在計(jì)算機(jī)行業(yè)的主導(dǎo)者是數(shù)據(jù)的擁有者。”
“但是,真正步入到大數(shù)據(jù)時(shí)代,還需要經(jīng)歷一個(gè)過程。”王斌說。大數(shù)據(jù)熱對(duì)于大數(shù)據(jù)發(fā)展是有益的,但不能防止有的人借此炒作概念用來圈錢。“有的不了解大數(shù)據(jù)、不懂大數(shù)據(jù)的人,也加入到投資中,或者很多和大數(shù)據(jù)關(guān)系不大的技術(shù)也都紛紛給自己戴上大數(shù)據(jù)的帽子。”王斌說。
“國外的公司講大數(shù)據(jù)還只是在營(yíng)銷策略領(lǐng)域。”王斌介紹說。在中科院發(fā)布的《科技發(fā)展新態(tài)勢(shì)與面向2020年的戰(zhàn)略選擇》研究報(bào)告中,就提到:大數(shù)據(jù)技術(shù)將關(guān)注的重點(diǎn)真正落在數(shù)據(jù)上,計(jì)算機(jī)行業(yè)要轉(zhuǎn)變?yōu)檎嬲男畔⑿袠I(yè)。計(jì)算機(jī)要從追求計(jì)算速度為主轉(zhuǎn)變?yōu)樘岣叽髷?shù)據(jù)處理能力為中心。
這種在硬件和軟件上的改變勢(shì)必需要大量資金投入,作為投資者和國家戰(zhàn)略應(yīng)審慎的判斷大數(shù)據(jù)核心價(jià)值以及與自身利害關(guān)系,防止產(chǎn)生泡沫。
現(xiàn)今對(duì)于大數(shù)據(jù)的預(yù)測(cè)或悲觀或樂觀,它究竟會(huì)如何改變?nèi)祟惿鐣?huì),我們還將拭目以待。