咨詢熱線:021-80392549

擁抱大數(shù)據(jù) 挖掘大價(jià)值

放大字體  縮小字體 發(fā)布日期:2014-10-19     來(lái)源:[標(biāo)簽:出處]     作者:[標(biāo)簽:作者]     瀏覽次數(shù):75
核心提示:

隨著互聯(lián)網(wǎng)的飛速發(fā)展及計(jì)算機(jī)技術(shù)的日益進(jìn)步,人們的日常生活越來(lái)越依賴于互聯(lián)網(wǎng)。即時(shí)通訊、網(wǎng)絡(luò)購(gòu)物、社交網(wǎng)站以及微博、微信等典型的互聯(lián)網(wǎng)應(yīng)用已成為了人們?nèi)粘I钪胁豢苫蛉钡囊徊糠,既滿足了人們情感交流的需要,又給人們的物質(zhì)生活帶來(lái)了極大的便利。反過來(lái),人們對(duì)于互聯(lián)網(wǎng)的廣泛使用也給網(wǎng)絡(luò)留下了越來(lái)越龐大的數(shù)據(jù)。這些數(shù)據(jù)包括:用戶上傳的各類文字、照片、視頻以及用戶在各類網(wǎng)站留下的日志記錄等。這類數(shù)據(jù)的規(guī)模變得日益龐大,例如,百度一家公司擁有的數(shù)據(jù)量就高達(dá)數(shù)百PB(1 PB = 1,024 TB)。歸納起來(lái),這類數(shù)據(jù)具有4V特征:Volume(數(shù)據(jù)量大)、Variety(數(shù)據(jù)種類多)、Value(價(jià)值密度低)、Velocity(處理速度要快)。近幾年來(lái),互聯(lián)網(wǎng)應(yīng)用及網(wǎng)絡(luò)接入帶寬都獲得了長(zhǎng)足發(fā)展,毫無(wú)疑問,大數(shù)據(jù)時(shí)代已經(jīng)來(lái)臨。

大數(shù)據(jù)的興起給網(wǎng)絡(luò)領(lǐng)域的科學(xué)研究和工程實(shí)踐帶來(lái)了革命性的變化,這也是這幾年來(lái)大數(shù)據(jù)一直為專家學(xué)者及工程師們?cè)诟黝悎?chǎng)合所“津津樂道”的原因?偨Y(jié)起來(lái),大數(shù)據(jù)所帶來(lái)的變化主要體現(xiàn)在以下幾點(diǎn):

1、當(dāng)前,數(shù)據(jù)的發(fā)展演進(jìn)已由DB(Data Base)走向BD(Big Data)。BD和DB存在著很大的不同。與DB相比,BD的體積大得多,處于TB級(jí),乃至PB級(jí),甚至更高。但DB中的數(shù)據(jù)是高質(zhì)量的,干凈的,數(shù)據(jù)價(jià)值密度高;而BD中的數(shù)據(jù)卻與之相反,單位密度的數(shù)據(jù)價(jià)值很低,是非結(jié)構(gòu)化的。如何在BD數(shù)據(jù)的高存儲(chǔ)及計(jì)算成本與低密度價(jià)值之間尋找到最佳平衡將是大數(shù)據(jù)研究的一項(xiàng)長(zhǎng)期課題。

2、大數(shù)據(jù)研究的側(cè)重點(diǎn)在于相關(guān)性而不是因果性。傳統(tǒng)的科學(xué)研究講究因果關(guān)系,強(qiáng)調(diào)的是精確性;但在大數(shù)據(jù)里面,相關(guān)性成為了研究的焦點(diǎn)。顯然,在相關(guān)性這個(gè)范疇內(nèi),對(duì)事物的預(yù)測(cè)就不能做到絕對(duì)精確,而只能在一定的置信區(qū)間內(nèi)對(duì)未來(lái)做出一定的判斷。事物間存在較強(qiáng)相關(guān)性的例子很多,比如,Google通過分析用戶對(duì)感冒相關(guān)癥狀的搜索頻度能預(yù)測(cè)流感;阿里巴巴通過對(duì)電子商務(wù)交易量的下降能預(yù)測(cè)金融危機(jī)。上述所列舉的相關(guān)性例子易于被理解,其實(shí),令人費(fèi)解的例子也不少。例如,有專家發(fā)現(xiàn):人的增重與房屋租賃存在著很強(qiáng)的相關(guān)性,這就不容易被理解了,但二者之間卻存在著很強(qiáng)的相關(guān)性,可以為我們所用,盡管二者之間并沒有直接的因果關(guān)系?偟膩(lái)講,大數(shù)據(jù)分析側(cè)重于挖掘不同事物間的相關(guān)性并以此作為作出各類判斷的依據(jù)。

3、大數(shù)據(jù)使運(yùn)算更依賴于數(shù)據(jù)而不是算法。運(yùn)算可以抽象成簡(jiǎn)單的表達(dá)式:Y=F(X),F(xiàn)()代表的是算法;而X代表的是數(shù)據(jù);Y代表我們希望得到的結(jié)果。在大數(shù)據(jù)時(shí)代,F(xiàn)()的重要性下降了,而X的重要性大幅增加,因?yàn)檩^多的數(shù)據(jù)對(duì)于結(jié)果的影響要好于較好的模型。

總之,隨著互聯(lián)網(wǎng)的飛速發(fā)展,大數(shù)據(jù)時(shí)代已經(jīng)來(lái)臨。大數(shù)據(jù)的特征也日益清晰,大數(shù)據(jù)的價(jià)值是顯而易見的。圍繞著大數(shù)據(jù)這座“數(shù)字寶藏”,越來(lái)越多的專家學(xué)者以及工程師正在不斷地加入“數(shù)據(jù)礦工”的行列,正在用他們的智慧去挖掘“數(shù)字寶藏”中蘊(yùn)含的彌可珍貴的“數(shù)字金礦”。互聯(lián)網(wǎng)的飛速發(fā)展產(chǎn)生了巨量的“數(shù)字寶藏”,而“數(shù)字寶藏”的開發(fā)利用必將反過來(lái)促進(jìn)互聯(lián)網(wǎng)的進(jìn)一步發(fā)展,催生新的互聯(lián)網(wǎng)殺手锏應(yīng)用,最終造福于廣大網(wǎng)民。

工博士工業(yè)品商城聲明:凡資訊來(lái)源注明為其他媒體來(lái)源的信息,均為轉(zhuǎn)載自其他媒體,并不代表本網(wǎng)站贊同其觀點(diǎn),也不代表本網(wǎng)站對(duì)其真實(shí)性負(fù)責(zé)。您若對(duì)該文章內(nèi)容有任何疑問或質(zhì)疑,請(qǐng)立即與商城(podvhdv.cn)聯(lián)系,本網(wǎng)站將迅速給您回應(yīng)并做處理。
聯(lián)系電話:021-31666777
新聞、技術(shù)文章投稿QQ:3267146135  投稿郵箱:syy@gongboshi.com