淺析大數(shù)據(jù)時(shí)代的數(shù)據(jù)挖掘與精細(xì)管理
人類進(jìn)入信息化時(shí)代以后,短短的數(shù)年時(shí)間,積累了大量的數(shù)據(jù),步入了大數(shù)據(jù)時(shí)代,使人類以前所未有的速度、厚度、細(xì)度和準(zhǔn)確度對信息的掌握成為可能。面對大量的數(shù)據(jù),基于充足的數(shù)據(jù)基礎(chǔ),對數(shù)據(jù)進(jìn)行挖掘與分析,并將
人類進(jìn)入信息化時(shí)代以后,短短的數(shù)年時(shí)間,積累了大量的數(shù)據(jù),步入了“大數(shù)據(jù)時(shí)代”,使人類以前所未有的速度、厚度、細(xì)度和準(zhǔn)確度對信息的掌握成為可能。面對大量的數(shù)據(jù),基于充足的數(shù)據(jù)基礎(chǔ),對數(shù)據(jù)進(jìn)行挖掘與分析,并將其運(yùn)用于企業(yè)的精細(xì)管理,也就不僅成為可能而且勢在必行。
一、大數(shù)據(jù)時(shí)代需要深度挖掘與精細(xì)管理
(一)大數(shù)據(jù)時(shí)代的數(shù)據(jù)特征
牛津大學(xué)教授維克托.邁爾)舍恩伯格(Viktor Mayer-SchÊnberger)在5大數(shù)據(jù)時(shí)代6中前瞻性地指出,大數(shù)據(jù)帶來的信息風(fēng)暴正在變革我們的生活、工作和思維,大數(shù)據(jù)開啟了一次重大的時(shí)代轉(zhuǎn)型,講述了大數(shù)據(jù)時(shí)代的思維變革、商業(yè)變革和管理變革。據(jù)統(tǒng)計(jì),近兩年內(nèi)由人類產(chǎn)生的數(shù)據(jù),竟然達(dá)到了人類有史以來的全部數(shù)據(jù)的90%以上。數(shù)據(jù)量的龐大,遠(yuǎn)遠(yuǎn)超出了我們的想象;數(shù)據(jù)量的巨大增長速度,也是我們始料未及的,這就是大數(shù)據(jù)時(shí)代的最大特征。這個(gè)巨大,不僅是數(shù)據(jù)量本身極為巨大,更深層意義是,數(shù)據(jù)所含的信息量同樣巨大無比。同時(shí),這些海量的數(shù)據(jù)及信息量必然給數(shù)據(jù)處理以及分析帶來極大的困難。因此,我們必須學(xué)會(huì)處理與分析海量數(shù)據(jù)的手段與方法,因?yàn)橹挥羞@樣,才不會(huì)被大量數(shù)據(jù)信息弄得頭昏腦脹,才能在大數(shù)據(jù)的海洋中暢游。
(二)大數(shù)據(jù)時(shí)代的數(shù)據(jù)挖掘
數(shù)據(jù)挖掘,簡單來說就是對數(shù)據(jù)進(jìn)行處理和分析,找到自己所需要的,扔掉自己不需要的信息。大數(shù)據(jù)時(shí)代,是一場數(shù)據(jù)上的革命時(shí)代,對人類社會(huì)生活具有顛覆性的影響。不僅如此,它還將對企業(yè)的決策、組織、業(yè)務(wù)流程等產(chǎn)生重要影響,甚至在某種程度上,它也能對國家的治理模式產(chǎn)生不可估量的影響。在大數(shù)據(jù)時(shí)代,人與人之間不再存在界限,甚至于完全模糊到?jīng)]有國界與任何疆界的程度。以前的種種最為寶貴的資產(chǎn)變成了數(shù)據(jù),成為大數(shù)據(jù)時(shí)代最為寶貴的財(cái)富,因此只有學(xué)會(huì)分析處理數(shù)據(jù),才能獲得這些所謂的財(cái)富。然而這些海量的“寶貴財(cái)富”就像一座藏寶山,它不在表面直接出現(xiàn),而是被層層包裹著。我們必須利用我們所能想到的各種工具去尋找寶藏,而這些工具中相當(dāng)重要的一種便是數(shù)據(jù)挖掘。
數(shù)據(jù)挖掘需要一個(gè)建模的過程,選取所需的大量數(shù)據(jù),然后利用各種數(shù)理模型對這些大數(shù)據(jù)進(jìn)行整理和分析,來有效地幫助企業(yè)了解不同的客戶,以及它們的市場劃分,并據(jù)此來了解消費(fèi)者的喜好和消費(fèi)者的行為方式,這便是數(shù)據(jù)挖掘的具體含義:從大數(shù)據(jù)中找出企業(yè)所需的一種方法。這些大量的數(shù)據(jù)之中必然隱藏著一種規(guī)律性的東西,要想找到這種規(guī)律,就得經(jīng)過數(shù)據(jù)挖掘過程并對數(shù)據(jù)進(jìn)行建模,利用所建的模型將這種關(guān)聯(lián)性、規(guī)律性從數(shù)據(jù)中找出來。由此可見,數(shù)據(jù)挖掘和統(tǒng)計(jì)的關(guān)系十分密切,數(shù)據(jù)挖掘過程中經(jīng)常會(huì)用到統(tǒng)計(jì)分析的一些方法,除此之外,還會(huì)利用到聯(lián)機(jī)分析與處理系統(tǒng)、專家系統(tǒng)及模式識別系統(tǒng)等科學(xué)方法。
(三)大數(shù)據(jù)時(shí)代的精細(xì)管理
2012年《大數(shù)據(jù)時(shí)代》呱呱墜地,不到一年時(shí)間便暢銷遍全球。從數(shù)據(jù)發(fā)展情形來看,工業(yè)、農(nóng)業(yè)、教育和軍事等多個(gè)信息化的發(fā)展過程中肯定會(huì)產(chǎn)生十分龐大的數(shù)據(jù)量,這便為數(shù)據(jù)精細(xì)管理提供了巨大的發(fā)展?jié)摿Α?/div>
大數(shù)據(jù)的精細(xì)管理永無止境,因?yàn)閿?shù)據(jù)不斷被更新,大數(shù)據(jù)的作業(yè)模型不斷在改進(jìn),分析、處理和應(yīng)用技術(shù)也在不斷進(jìn)步。就我國目前狀況而言,我國存在著非常大量的數(shù)據(jù),但是對這些數(shù)據(jù)的精細(xì)管理卻十分缺少。精細(xì)管理有一個(gè)步驟是數(shù)據(jù)采集,這個(gè)過程務(wù)必須要十分詳細(xì)、資料完備,只有這樣,我們才能在數(shù)據(jù)中找到我們所需要的客觀信息,才能更好地分析處理數(shù)據(jù)。目前,我國的大型互聯(lián)網(wǎng)行業(yè)大都十分重視數(shù)據(jù)的采集工作,這對于未來的數(shù)據(jù)精細(xì)管理的作用至關(guān)重要,在后續(xù)的數(shù)據(jù)分析中有著舉足輕重的地位。
(四)大數(shù)據(jù)時(shí)代數(shù)據(jù)挖掘與數(shù)據(jù)精細(xì)管理的意義
無論是數(shù)據(jù)挖掘,還是精細(xì)管理,在大數(shù)據(jù)時(shí)代都有著十分重要的意義,因?yàn)橥ㄟ^分析,我們可以提出提供決策的意見與建議,這些都是靠強(qiáng)大的數(shù)據(jù)支持的。目前,世界五百強(qiáng)企業(yè)中絕大多數(shù)在提出管理建議時(shí),都需要大量數(shù)據(jù)為其作為理論依據(jù)。而在我國,即使是中小企業(yè),也在分析、解決問題時(shí)開始傾向于用數(shù)據(jù)說話,如若沒有大量數(shù)據(jù),便沒有理論依據(jù),也就無法提出科學(xué)合理的建議。此外, 數(shù)據(jù)本身其實(shí)是會(huì)“說話”的,只不過這些話需要自己找出來,在對這些數(shù)據(jù)進(jìn)行分析處理之后,就可能從中發(fā)現(xiàn)企業(yè)所需要的東西。大量的數(shù)據(jù)中其實(shí)隱藏著很多寶藏,比如客戶的喜好及市場未來的可能發(fā)展趨勢等,這些對于企業(yè)有極其重要的意義,只有更加了解、接近市場的企業(yè),才能從競爭中脫穎而出。企業(yè)必須依靠大量數(shù)據(jù)的分析才能更好地為客戶服務(wù),更好地完成企業(yè)的各項(xiàng)工作。
二、大數(shù)據(jù)時(shí)代如何進(jìn)行數(shù)據(jù)的深度挖掘
由于企業(yè)對大數(shù)據(jù)資源有開發(fā)方面的需求,于是便有了數(shù)據(jù)的深度挖掘。企業(yè)擁有大量寶貴的數(shù)據(jù)資源,它們都希望從中提煉出最有用的信息與線索。深度數(shù)據(jù)挖掘包括了準(zhǔn)備階段、挖掘階段以及結(jié)果的表達(dá)和解釋工作。數(shù)據(jù)挖掘的手段也有很多,諸如關(guān)聯(lián)分析、分類分析、聚類分析、特異群組分析以及演變態(tài)勢分析等。
根據(jù)數(shù)據(jù)中的差異性,可以很好地建立分類模型,這樣做有十分明顯的作用,它能夠把狀態(tài)細(xì)分化,實(shí)施更具有針對性的營銷,找到更有價(jià)值的客戶群體。可以在進(jìn)行正式分類前先進(jìn)行一次估計(jì),然后根據(jù)估計(jì)結(jié)果對數(shù)據(jù)進(jìn)行預(yù)分類,再進(jìn)行修正直到達(dá)到更好。
對數(shù)據(jù)進(jìn)行預(yù)測有著十分重要的意義,這是對數(shù)據(jù)進(jìn)行深度挖掘的一個(gè)不能缺少的過程,也是對于數(shù)據(jù)挖掘更為高級的應(yīng)用。預(yù)測不僅是估計(jì)大數(shù)據(jù),更要求根據(jù)這些大數(shù)據(jù)進(jìn)行準(zhǔn)確的預(yù)判。預(yù)測要對以前做好的大數(shù)據(jù)集進(jìn)行分析整理,對它所代表的現(xiàn)實(shí)世界進(jìn)行抽象,初步得到最基本的模型,然后從信度及效度兩個(gè)方面對模型進(jìn)行檢驗(yàn),確保建立的模型的準(zhǔn)確性。建立模型只是一個(gè)對數(shù)據(jù)進(jìn)行模擬的過程,其目的是通過這一過程對未來趨勢進(jìn)行預(yù)測,盡量達(dá)到準(zhǔn)確。數(shù)據(jù)本身是過去的,從這一方面來說它們只能代表過去,但是我們可以通過模型找到其產(chǎn)生的基本機(jī)制,使預(yù)測成為可能并有準(zhǔn)確性。過去的數(shù)據(jù)并不只是能夠表示過去,它們是十分珍貴的財(cái)富,因?yàn)閺倪@些數(shù)據(jù)之中我們能夠預(yù)測未來。預(yù)測是一個(gè)復(fù)雜的過程,據(jù)統(tǒng)計(jì),目前有關(guān)預(yù)測已經(jīng)存在的模型已經(jīng)有了幾百種,就算是最常用模型的也有好幾十種,因此這個(gè)過程有待于進(jìn)一步提高和改進(jìn)。現(xiàn)實(shí)世界是復(fù)雜的,雖然說預(yù)測技術(shù)到目前有了突飛猛進(jìn)的發(fā)展,但是預(yù)測只是預(yù)測,永遠(yuǎn)都替代不了現(xiàn)實(shí),而且任何已經(jīng)存在的模型都不一定比量身定做出來的更符合當(dāng)前的業(yè)務(wù)。目前,可以運(yùn)用于大部分企業(yè)應(yīng)用的模型有很多種,包括多元回歸、非線性回歸、AR模型、MA模型等各種各樣的預(yù)測模型。還有一些是專業(yè)級統(tǒng)計(jì)應(yīng)用軟件,比如矩陣實(shí)驗(yàn)室、SAS、SPSS、MATLAB等,這些也為深度數(shù)據(jù)挖掘提供了便利條件。
三、大數(shù)據(jù)時(shí)代數(shù)據(jù)精細(xì)管理淺析
如果說數(shù)據(jù)挖掘提高了企業(yè)的洞察力,那么大數(shù)據(jù)管理的精細(xì)程度則為企業(yè)提供了數(shù)據(jù)管理方面的保障。目前,大數(shù)據(jù)的精細(xì)管理僅限于大型企業(yè),尤其是互聯(lián)網(wǎng)或其他高科技企業(yè),因?yàn)辇嫶蟮臄?shù)據(jù)量在目前并不會(huì)出現(xiàn)于普通百姓之家,即使一些企業(yè)有數(shù)十年的數(shù)據(jù)量,也都沒有達(dá)到大數(shù)據(jù)的水平。不管是以利潤為中心,還是以客戶為中心,大數(shù)據(jù)的精細(xì)管理都是一種推動(dòng)力量,有利于推動(dòng)企業(yè)的發(fā)展。大數(shù)據(jù)的精細(xì)管理為其提供了管理方面的基礎(chǔ),同時(shí)為差異化競爭提供了原始理論方面的強(qiáng)有力支撐。目前大型企業(yè)在精細(xì)管理方面存在著不少問題,正是由于這些問題的存在才導(dǎo)致企業(yè)主營業(yè)務(wù)缺乏方向性、針對性、導(dǎo)向性以及向心性等諸問題。
結(jié)束語
“大數(shù)據(jù)時(shí)代”這個(gè)概念的出現(xiàn)只有短短數(shù)年時(shí)間,但是這個(gè)概念已經(jīng)滲透到五洲四海,與之伴隨的則是大數(shù)據(jù)時(shí)代的數(shù)據(jù)挖掘與管理革命。我國的大型企業(yè)都十分重視對大量數(shù)據(jù)的獲取與掌握,這充分說明,數(shù)據(jù)挖掘與精細(xì)管理在這個(gè)嶄新的大數(shù)據(jù)時(shí)代中具有非同一般的重要意義。
責(zé)任編輯:葉雨田
免責(zé)聲明:本文僅代表作者個(gè)人觀點(diǎn),與本站無關(guān)。其原創(chuàng)性以及文中陳述文字和內(nèi)容未經(jīng)本站證實(shí),對本文以及其中全部或者部分內(nèi)容、文字的真實(shí)性、完整性、及時(shí)性本站不作任何保證或承諾,請讀者僅作參考,并請自行核實(shí)相關(guān)內(nèi)容。
我要收藏
個(gè)贊
-
權(quán)威發(fā)布 | 新能源汽車產(chǎn)業(yè)頂層設(shè)計(jì)落地:鼓勵(lì)“光儲(chǔ)充放”,有序推進(jìn)氫燃料供給體系建設(shè)
2020-11-03新能源,汽車,產(chǎn)業(yè),設(shè)計(jì) -
中國自主研制的“人造太陽”重力支撐設(shè)備正式啟運(yùn)
2020-09-14核聚變,ITER,核電 -
探索 | 既耗能又可供能的數(shù)據(jù)中心 打造融合型綜合能源系統(tǒng)
2020-06-16綜合能源服務(wù),新能源消納,能源互聯(lián)網(wǎng)
-
新基建助推 數(shù)據(jù)中心建設(shè)將迎爆發(fā)期
2020-06-16數(shù)據(jù)中心,能源互聯(lián)網(wǎng),電力新基建 -
泛在電力物聯(lián)網(wǎng)建設(shè)下看電網(wǎng)企業(yè)數(shù)據(jù)變現(xiàn)之路
2019-11-12泛在電力物聯(lián)網(wǎng) -
泛在電力物聯(lián)網(wǎng)建設(shè)典型實(shí)踐案例
2019-10-15泛在電力物聯(lián)網(wǎng)案例
-
新基建之充電樁“火”了 想進(jìn)這個(gè)行業(yè)要“心里有底”
2020-06-16充電樁,充電基礎(chǔ)設(shè)施,電力新基建 -
燃料電池汽車駛?cè)雽こ0傩占疫€要多久?
-
備戰(zhàn)全面電動(dòng)化 多部委及央企“定調(diào)”充電樁配套節(jié)奏
-
權(quán)威發(fā)布 | 新能源汽車產(chǎn)業(yè)頂層設(shè)計(jì)落地:鼓勵(lì)“光儲(chǔ)充放”,有序推進(jìn)氫燃料供給體系建設(shè)
2020-11-03新能源,汽車,產(chǎn)業(yè),設(shè)計(jì) -
中國自主研制的“人造太陽”重力支撐設(shè)備正式啟運(yùn)
2020-09-14核聚變,ITER,核電 -
能源革命和電改政策紅利將長期助力儲(chǔ)能行業(yè)發(fā)展
-
探索 | 既耗能又可供能的數(shù)據(jù)中心 打造融合型綜合能源系統(tǒng)
2020-06-16綜合能源服務(wù),新能源消納,能源互聯(lián)網(wǎng) -
5G新基建助力智能電網(wǎng)發(fā)展
2020-06-125G,智能電網(wǎng),配電網(wǎng) -
從智能電網(wǎng)到智能城市