2013年大數(shù)據(jù)系統(tǒng)與關(guān)系型數(shù)據(jù)的共存
大數(shù)據(jù)在2011年嶄露頭角，2012年一飛沖天，它可能會(huì)以一種戲劇性的方式改變數(shù)據(jù)管理的很多方面。大數(shù)據(jù)系統(tǒng)給管理和操縱計(jì)算機(jī)數(shù)據(jù)、連續(xù)提取、轉(zhuǎn)換和加載功能、運(yùn)作商業(yè)智能、動(dòng)態(tài)大數(shù)據(jù)以及基于云的數(shù)據(jù)倉(cāng)庫(kù)等等都帶來(lái)了變化。
不過(guò)，隨著大數(shù)據(jù)進(jìn)入2013年，已經(jīng)沒(méi)有什么系統(tǒng)技術(shù)能比NoSQL數(shù)據(jù)庫(kù)和Hadoop框架更活躍了，看起來(lái)這兩款產(chǎn)品還有更大的發(fā)展空間。根據(jù)MarketAnalysis.com 2012年的一份報(bào)告看，單單是Hadoop-MapReduce市場(chǎng)，預(yù)計(jì)復(fù)合年增長(zhǎng)率將達(dá)到58%，在2018年將達(dá)到22億美元。
NoSQL和Hadoop的出現(xiàn)主要是為應(yīng)對(duì)非結(jié)構(gòu)化數(shù)據(jù)的，比如文本數(shù)據(jù)或者web日志。就像Apache Hadoop一樣，這些技術(shù)通常是從開(kāi)源起步，逐漸成為新的商業(yè)產(chǎn)品。
Judith Hurwitz是Hurwitz and Associates公司的總裁兼CEO，該公司位于美國(guó)馬薩諸塞州，她認(rèn)為大數(shù)據(jù)架構(gòu)和大規(guī)模并行處理大大改變了數(shù)據(jù)景象。她說(shuō)：“在此之前，即便數(shù)據(jù)真的對(duì)公司很重要，人們也沒(méi)有能力獲取巨大數(shù)據(jù)量并進(jìn)行實(shí)時(shí)分析。”
她認(rèn)為：“現(xiàn)在，不現(xiàn)實(shí)的東西正變得實(shí)用。這種情況已經(jīng)把數(shù)據(jù)帶出了舒適區(qū)。”
SQL受創(chuàng)，即將回?fù)?/strong>
我們可以在網(wǎng)站上看到，2012年伊始，對(duì)主流關(guān)系型數(shù)據(jù)庫(kù)陷入困境的預(yù)測(cè)就出現(xiàn)了。部分預(yù)言已成為現(xiàn)實(shí)。SQL關(guān)系型數(shù)據(jù)庫(kù)在與未來(lái)幾年可能成為其替代品的產(chǎn)品經(jīng)過(guò)一系列斗爭(zhēng)之后，現(xiàn)在(或者很快)似乎面臨著關(guān)于處理整個(gè)企業(yè)大數(shù)據(jù)量過(guò)濾的最為劇烈的競(jìng)爭(zhēng)。
這一趨勢(shì)背后的推動(dòng)力是企業(yè)對(duì)以更快的速率獲取更多非結(jié)構(gòu)化數(shù)據(jù)的渴望，這樣企業(yè)才能更加依靠數(shù)據(jù)驅(qū)動(dòng)做出決策。慣用的處理方式正在改變，以適應(yīng)最好的新技術(shù)。
這些來(lái)自2012年特定數(shù)據(jù)管理供應(yīng)商的舉動(dòng)展現(xiàn)出大數(shù)據(jù)和Hadoop對(duì)關(guān)系型數(shù)據(jù)沖擊的現(xiàn)狀：
IBM公司還在繼續(xù)創(chuàng)立小型數(shù)據(jù)和分析公司，盡管比2011年少了些。藍(lán)色巨人的努力方向從小的改進(jìn)(比如，針對(duì)DB2 10的NoSQL圖形庫(kù)和InfoSphere Warehouse 10)到非常巨大的PureData系統(tǒng)裝置，目的都是為了給企業(yè)搞定大數(shù)據(jù)。
甲骨文公司在年初推出了大數(shù)據(jù)設(shè)備。這一發(fā)布是緊跟著Oracle NoSQL數(shù)據(jù)庫(kù)2.0之后發(fā)布的，Oracle NoSQL數(shù)據(jù)庫(kù)2.0已經(jīng)自動(dòng)實(shí)現(xiàn)重新平衡，新的應(yīng)用編程接口可以處理大型對(duì)象，與Oracle數(shù)據(jù)庫(kù)有更緊密的集成，支持直接用SQL查詢Oracle NoSQL數(shù)據(jù)庫(kù)記錄。
微軟公司展示了Hadoop對(duì)Windows Azure和Windows Server支持的預(yù)覽;Teradata公司發(fā)布了其Aster大數(shù)據(jù)分析產(chǎn)品;而Informatica公司發(fā)布了PowerCenter套件的大數(shù)據(jù)版，據(jù)說(shuō)消除了Hadoop手工編碼的需求，并把編程任務(wù)帶入了Informatica開(kāi)發(fā)環(huán)境。
SQL在2012年可能只有一兩次回?fù)簦撬e極應(yīng)對(duì)市場(chǎng)挑戰(zhàn)的舉動(dòng)有重要意義。在非主流NoSQL和Hadoop方面比較專業(yè)的公司更新了他們?nèi)ツ甑腟QL認(rèn)證。一個(gè)典型的例子是Hadoop創(chuàng)立了Cloudera公司，該公司期望增強(qiáng)SQL與Impala的協(xié)作程度(Impala是一款Hadoop軟件產(chǎn)品，支持標(biāo)準(zhǔn)SQL做交互式查詢)。 #p#
大數(shù)據(jù)的變動(dòng)
這樣的舉動(dòng)可能代表了一定的勢(shì)頭——人們看到SQL和NoSQL一起被提及的機(jī)會(huì)更多了。在某種程度上，SQL在早期大數(shù)據(jù)喧鬧的討論中有點(diǎn)被淡化了。
Ronnie Beggs是美國(guó)舊金山SQLstream公司的副總裁，該公司是一家流媒體數(shù)據(jù)庫(kù)制造商。他說(shuō)：“在過(guò)去的幾年里，由于大數(shù)據(jù)運(yùn)動(dòng)，SQL已經(jīng)不再掛在每個(gè)人的嘴邊了。”同時(shí)，他還說(shuō)：“大數(shù)據(jù)和NoSQL雙劍合璧，已經(jīng)沖擊到了主流。”
他還表示，在2013年，我們應(yīng)該會(huì)看到明顯的變化，并提到近幾年在使NoSQL數(shù)據(jù)庫(kù)更好地適應(yīng)SQL風(fēng)格的開(kāi)發(fā)方面所作出的各種努力。
Beggs說(shuō)：“它是不斷變化的。我們接下來(lái)這一年會(huì)看到SQL的回歸，它將成為所有大數(shù)據(jù)平臺(tái)的接口。”
這種發(fā)展走向了Hadoop框架、NoSQL和SQL方法的共存，這標(biāo)志著在大數(shù)據(jù)的成熟度方面邁出了新的一步。2013年，大數(shù)據(jù)有可能從一個(gè)熱門(mén)話題變?yōu)榍袑?shí)的實(shí)踐。
Colin White是美國(guó)俄勒岡州Ashland BI研究機(jī)構(gòu)的總裁和創(chuàng)始人，他說(shuō)：“我認(rèn)為人們正努力通過(guò)大數(shù)據(jù)的炒作，來(lái)真正理解業(yè)務(wù)價(jià)值。在2013年，我認(rèn)為我們將看到人們從大數(shù)據(jù)中獲得業(yè)務(wù)價(jià)值的優(yōu)秀案例。問(wèn)題不在于大數(shù)據(jù)本身，而在于你的運(yùn)用。”
雖然企業(yè)對(duì)新技術(shù)有著廣泛的興趣，但不是所有公司都會(huì)以同樣的程度全面部署大數(shù)據(jù)系統(tǒng)。關(guān)于這一點(diǎn)，在最近TechTarget舉辦的一次重點(diǎn)銀行會(huì)議上，一位集成服務(wù)經(jīng)理也有所提及。
他認(rèn)為銀行業(yè)只有部分涉足了基本的大數(shù)據(jù)，而不是全部。銀行和其它領(lǐng)域只看到了大數(shù)據(jù)的數(shù)量，而沒(méi)有留意到它的非結(jié)構(gòu)性。至少目前還是這樣。
他談到：“大數(shù)據(jù)的含義有兩部分。第一部分是它們的量很大，第二部分是數(shù)據(jù)為非結(jié)構(gòu)化。銀行明顯屬于第一部分。但是我們不會(huì)去收集tweets，至少目前還沒(méi)有。我們還在觀望，等待金融數(shù)據(jù)服務(wù)市場(chǎng)的應(yīng)對(duì)。”
