據(jù)估計，2009年電力公司需要處理的數(shù)據(jù)量已經(jīng)達(dá)到194PB(美國國會圖書館的所有藏書加起來相當(dāng)于3PB左右)，如今美國各地的電力公司數(shù)據(jù)中心每天都會新增數(shù)以TB計的數(shù)據(jù)量。

例如，智能電網(wǎng)投資撥款已經(jīng)推動了相量監(jiān)測裝置(PMU)的安裝。該裝置以每秒30次的頻率收集眾多電網(wǎng)節(jié)點的電壓、電流和數(shù)字狀態(tài)信息。這些數(shù)據(jù)有助于電力公司更好地管理電網(wǎng)，尤其是在可再生能源貢獻(xiàn)了更多電力的情況下。

“這產(chǎn)生了龐大的數(shù)據(jù)量，動輒就是好幾個TB。”行業(yè)贊助的電力研究所(ElectricPowerResearchInstitute)的保羅?米爾達(dá)(PaulMyrda)在“智能電網(wǎng)和新能源經(jīng)濟大湖研討會”上擔(dān)任討論嘉賓時如此說道。這次研討會已于9月25日在伊利諾斯理工學(xué)院結(jié)束。

“數(shù)據(jù)多不勝數(shù)。如何處理它們?如何利用它們?如何管理它們?在什么情況下它們會變得毫無用處?”

美國電力研究協(xié)會(EPRI)最近對電力公司的數(shù)據(jù)處理情況進(jìn)行了調(diào)查。

“總體上來說，目前有能力獲得這些數(shù)據(jù)的大多數(shù)電力公司都在收集它們，將之永久保留，但很少有電力公司知道如何將它們歸檔或者轉(zhuǎn)移到線下。目前，我們還不知道篩選數(shù)據(jù)的任何方法。”米爾達(dá)說。

“另一個問題在于，他們沒有簡單的方法來把數(shù)據(jù)與任何特定時間點上的系統(tǒng)狀態(tài)及時聯(lián)系起來。因此，他們雖然有電壓和電流數(shù)據(jù)，但卻沒有與之相關(guān)的類型分析。一天、兩天、一周、一年過后，這些數(shù)據(jù)能有什么用處?”

米爾達(dá)說，他提倡安裝電源管理單元(PMU)，并且關(guān)注利用這些數(shù)據(jù)的軟件的開發(fā)情況。雖然有些軟件已經(jīng)開發(fā)出來，但他說“沒有殺手級軟件”。

“這些是真正的問題。真正的問題不少，我剛剛所說的只是圍繞著大數(shù)據(jù)和電力公司的問題的一個方面。”

另一個方面涉及到信息技術(shù)。咨詢公司W(wǎng)estMonroePartners的高級技術(shù)架構(gòu)師丹?羅薩諾瓦(DanRosanova)說，大多數(shù)電力公司都配備了最先進(jìn)的計算機、數(shù)據(jù)庫和網(wǎng)絡(luò)——當(dāng)今最好的信息技術(shù)架構(gòu)。

現(xiàn)在的IT架構(gòu)能夠很好地應(yīng)付當(dāng)前的常見應(yīng)用。這些應(yīng)用常常涉及到通過網(wǎng)絡(luò)訪問處理器和數(shù)據(jù)以解決特定的問題。

但羅薩諾瓦說，目前正在涌入電力公司的那種大數(shù)據(jù)會使現(xiàn)在的網(wǎng)絡(luò)不堪重負(fù)。例如，單次計算可能需要通過網(wǎng)絡(luò)訪問4TB的數(shù)據(jù)量，超過了國會圖書館的信息量。

“當(dāng)你進(jìn)入大數(shù)據(jù)領(lǐng)域時，集中化模式就會分崩離析。這種模式很好地服務(wù)了我們目前正在做的大多數(shù)事情。那是4TB數(shù)據(jù)量。在你獲得我們先前提到的那種PB規(guī)模的數(shù)據(jù)量之前，請慢慢等待吧。”

因此，像羅薩諾瓦這樣的架構(gòu)師必須設(shè)計一種新的IT基礎(chǔ)設(shè)施，但他們?nèi)匀徊恢佬碌募軜?gòu)究竟應(yīng)該滿足什么要求：

“我們不知道我們將如何使用所有這些數(shù)據(jù)。”他說，“坦白說，我們將用到的很多工具可能還沒有創(chuàng)造出來。大數(shù)據(jù)之所以是個大挑戰(zhàn)，原因不僅在于我們不知道我們將用到什么工具，還在于目前我們也不知道對存儲容量的需求有多大。我們只知道需要很大的存儲容量。”

“這個挑戰(zhàn)超過了目前大多數(shù)人的預(yù)料。”

米爾達(dá)認(rèn)為，這個挑戰(zhàn)對工程師們來說意味著為數(shù)據(jù)打造應(yīng)用的機會，對大型電力公司來說意味著尋求合作的機會。

“或許有些工程師可以通過出售他們的應(yīng)用而掙點錢。”他說，“在這個方面，我們可以利用整個電力行業(yè)和某些最具創(chuàng)造力的已有人才。”