2.1.3 大數(shù)據(jù)技術(shù)發(fā)展趨勢(shì)

1. Fadoop架構(gòu)的增強(qiáng)艱大數(shù)據(jù)技術(shù)將迅速發(fā)展

綜合考慮以上國內(nèi)外大數(shù)據(jù)廠商的技術(shù)進(jìn)展，可以發(fā)現(xiàn)：為滿足更多數(shù)據(jù)處理場(chǎng)所的需要，針對(duì)Hadoop架構(gòu)的增強(qiáng)型大數(shù)據(jù)技術(shù)將迅速發(fā)展。我們發(fā)現(xiàn)上述絕大部分廠商都采用了 Hadoop開源大數(shù)據(jù)處理平臺(tái)架構(gòu)作為其大數(shù)據(jù)解決方案的重要一環(huán)。Hadoop 和MapReduce模式顯然是解決大數(shù)據(jù)問題的方式之一。但Hadoop的某些環(huán)節(jié)仍存在可以優(yōu)化的地方，例如從其數(shù)據(jù)處理模式來看. Hadoop僅僅是對(duì)于批處理來說比較好。越來越多的應(yīng)用需要優(yōu)化Hadoop使用的NoSQL數(shù)據(jù)庫，使其可以利用內(nèi)存處理，這樣請(qǐng)求就能更快地返回。

2.基于大數(shù)據(jù)一體機(jī)的大數(shù)據(jù)解決方案將大行其道

大數(shù)據(jù)一體機(jī)通過標(biāo)準(zhǔn)化的架構(gòu)集成了服務(wù)器、存儲(chǔ)、網(wǎng)絡(luò)、軟件等配置，簡(jiǎn)化了數(shù)據(jù)中心基礎(chǔ)設(shè)施部署和運(yùn)維管理的復(fù)雜性。其中，甲骨文公司基于NoSQL的大數(shù)據(jù)一體機(jī)以及SAP的HANA 軟硬件一體化平臺(tái)都為用戶突破了原有架構(gòu)的擴(kuò)展瓶頸和新技術(shù)條件下的客戶應(yīng)用門檻，推進(jìn)了大數(shù)據(jù)技術(shù)在相應(yīng)領(lǐng)域的應(yīng)用。

3.結(jié)合客戶的實(shí)際需求合理整合產(chǎn)品

ElasticSearch、Pentaho,以及許多其他工具覆蓋了整個(gè)大數(shù)據(jù)生態(tài)系統(tǒng)的不同細(xì)分市場(chǎng)。但下一個(gè)重要階段是如何讓它們能夠更好協(xié)同工作。直到這個(gè)階段的到來，大數(shù)據(jù)的管理還將比較隨意。

當(dāng)然,這并不意味著一個(gè)集成產(chǎn)品將永遠(yuǎn)適合所有的商業(yè)模式。數(shù)據(jù)以多種形式出現(xiàn)，并且每個(gè)企業(yè)組織都希望利用這些信息做不同的事情。企業(yè)組織將需要使用各種不同的方式來處理他們的數(shù)據(jù)。根據(jù)數(shù)據(jù)的來源、格式，他們?yōu)槭裁词占麄兿Ｍ绾未鎯?chǔ)、如何分析，還有他們需要以多快的速度來處理。作為大數(shù)據(jù)的開發(fā)服務(wù)商，希望在整合的同時(shí)仍然保持模塊化，這將允許企業(yè)為自己獨(dú)有的使用案例創(chuàng)建合適的工具時(shí)無需每次都重新開發(fā)。

4.自助服務(wù)型大數(shù)據(jù)技術(shù)將成為主流

隨著大數(shù)據(jù)工具和服務(wù)的發(fā)展。2015年IT行業(yè)將逐漸緩解陷入發(fā)展瓶頸的僵局，越來越多的商業(yè)和學(xué)術(shù)領(lǐng)域的用戶都能夠借助相關(guān)工具或使用相關(guān)服務(wù)訪問大量數(shù)據(jù)。

2015年，自助服務(wù)大數(shù)據(jù)將成為IT行業(yè)的一種趨勢(shì)，它允許商業(yè)用戶可以通過自助服務(wù)接觸大數(shù)據(jù)。自助服務(wù)還可以幫助開發(fā)者、數(shù)據(jù)科學(xué)家和數(shù)據(jù)分析師直接進(jìn)行數(shù)據(jù)探索和處理工作。在此之前，IT行業(yè)要求建立一種集中的數(shù)據(jù)結(jié)構(gòu)，但是這非常消耗時(shí)間和成本。針對(duì)某些用戶案例，Hadoop可以幫助企業(yè)適應(yīng)structure-on-read 這種結(jié)構(gòu)模式。一些先進(jìn)的組織機(jī)構(gòu)將會(huì)通過數(shù)據(jù)綁定的運(yùn)行模式而非集中的結(jié)構(gòu)來滿足持續(xù)的需求。例如，百度“大數(shù)據(jù)引擎” 包括開放云、數(shù)據(jù)工廠和百度大腦三個(gè)核心組件，而向所有人提供免費(fèi)的自助型大數(shù)據(jù)服務(wù)。這種自助型服務(wù)公式將促進(jìn)企業(yè)更好地利用新的數(shù)據(jù)資源，同時(shí)又能夠抓住新的市場(chǎng)給予，應(yīng)對(duì)問題和挑戰(zhàn)。

書名：電力大數(shù)據(jù)：能源互聯(lián)網(wǎng)時(shí)代的電力企業(yè)轉(zhuǎn)型與價(jià)值創(chuàng)造

ISBN：978-7-111-51693-4

作者：賴征田

出版日期：2016-01

出版社：機(jī)械工業(yè)出版社