大數(shù)據(jù)是指無法在一定時間范圍內(nèi)用常規(guī)軟件工具進行捕捉、管理和處理的數(shù)據(jù)集合,是需要新處理模式才能具有更強的決策力、洞察發(fā)現(xiàn)力和流程優(yōu)化能力的海量、高增長率和多樣化的信息資產(chǎn)。 大數(shù)據(jù)具有以下特點:數(shù)據(jù)規(guī)模大,數(shù)據(jù)類型多,數(shù)據(jù)價值密度低,處理速度快。在“互聯(lián)網(wǎng)+”時代,大數(shù)據(jù)已經(jīng)成為信息化建設(shè)的重要內(nèi)容和創(chuàng)新動力,在經(jīng)濟社會發(fā)展中發(fā)揮著越來越重要的作用。 大數(shù)據(jù)是對傳統(tǒng)數(shù)據(jù)的擴展和延伸。 一方面,它可以打破傳統(tǒng)數(shù)據(jù)量與分析技術(shù)的局限性,豐富和拓展現(xiàn)有的數(shù)據(jù)來源;另一方面,大數(shù)據(jù)技術(shù)可以有效地將結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)整合為統(tǒng)一、完整和一致的信息資源。
1.從數(shù)據(jù)“黑箱”走向數(shù)據(jù)“白箱”
傳統(tǒng)的數(shù)據(jù)庫是一種以數(shù)據(jù)為中心的數(shù)據(jù)庫,通過對數(shù)據(jù)進行存儲和檢索來完成特定的任務(wù)。從數(shù)據(jù)“黑箱”走向數(shù)據(jù)“白箱”,能夠消除對數(shù)據(jù)的陌生感和不透明感,使用戶更加清楚地了解自身在各個環(huán)節(jié)上所處的位置、狀態(tài)和趨勢,并根據(jù)這些信息做出更準(zhǔn)確的決策。大數(shù)據(jù)是對傳統(tǒng)數(shù)據(jù)庫的擴展與延伸,從數(shù)據(jù)的獲取、存儲和分析等多個角度來看,大數(shù)據(jù)技術(shù)都可以看作是對傳統(tǒng)數(shù)據(jù)庫的改進。大數(shù)據(jù)技術(shù)具有以下四個特點:大數(shù)據(jù)平臺化、數(shù)據(jù)業(yè)務(wù)化、算法模型化和應(yīng)用智能化。大數(shù)據(jù)平臺化是指大數(shù)據(jù)平臺是大數(shù)據(jù)處理技術(shù)和應(yīng)用技術(shù)相結(jié)合而形成的一個完整系統(tǒng)。它將使數(shù)據(jù)能夠在網(wǎng)絡(luò)中自由流動,實現(xiàn)信息資源的共享,并為企業(yè)創(chuàng)造更多價值。
2.大數(shù)據(jù)相關(guān)技術(shù)研究
大數(shù)據(jù)相關(guān)技術(shù)包括數(shù)據(jù)挖掘、云計算、分布式數(shù)據(jù)庫等。隨著數(shù)據(jù)量的增長,這些技術(shù)將會被廣泛地應(yīng)用在大數(shù)據(jù)處理中。隨著大數(shù)據(jù)的應(yīng)用和發(fā)展,數(shù)據(jù)存儲、處理與分析工具也將隨之發(fā)生變化,比如:云計算將成為大數(shù)據(jù)的存儲和處理平臺;分布式數(shù)據(jù)庫將成為大數(shù)據(jù)的主流技術(shù)之一。
3.大數(shù)據(jù)應(yīng)用將更加廣泛
大數(shù)據(jù)應(yīng)用將越來越廣泛,將產(chǎn)生巨大的經(jīng)濟社會效益。首先,大數(shù)據(jù)應(yīng)用將廣泛滲透到各個行業(yè)和領(lǐng)域,成為推動經(jīng)濟社會發(fā)展的新動力。其次,大數(shù)據(jù)應(yīng)用將推動產(chǎn)業(yè)轉(zhuǎn)型升級,為經(jīng)濟社會發(fā)展提供新動能。大數(shù)據(jù)不僅是一種新的商業(yè)模式,也是一種新的資源配置方式,正在影響和改變著人們的工作、生活和學(xué)習(xí)方式。最后,大數(shù)據(jù)應(yīng)用將促進社會治理能力現(xiàn)代化。隨著大數(shù)據(jù)在各行各業(yè)的廣泛應(yīng)用,傳統(tǒng)的管理模式、組織架構(gòu)、技術(shù)手段和社會治理方式正在發(fā)生深刻變化,而這些變化將推動政府管理從經(jīng)驗型向數(shù)字化轉(zhuǎn)變,從而促進社會治理現(xiàn)代化水平提升。
4.大數(shù)據(jù)產(chǎn)業(yè)將迎來發(fā)展的春天
大數(shù)據(jù)產(chǎn)業(yè)是指以數(shù)據(jù)收集、存儲、處理、分析為基礎(chǔ),以信息服務(wù)為核心,以應(yīng)用服務(wù)為支撐,實現(xiàn)對海量數(shù)據(jù)的高效采集和分析利用的相關(guān)產(chǎn)業(yè)和行業(yè)。 目前,大數(shù)據(jù)產(chǎn)業(yè)正處在快速發(fā)展階段。中國已經(jīng)成為世界第二大經(jīng)濟體,而大數(shù)據(jù)作為互聯(lián)網(wǎng)經(jīng)濟下最具活力的技術(shù)領(lǐng)域之一,正在逐步成為各行業(yè)創(chuàng)新發(fā)展的重要驅(qū)動力。 未來中國大數(shù)據(jù)產(chǎn)業(yè)將呈現(xiàn)出以下發(fā)展趨勢: (1)大數(shù)據(jù)領(lǐng)域?qū)⒊蔀閲抑攸c支持領(lǐng)域; (2)大數(shù)據(jù)核心技術(shù)將取得突破,大數(shù)據(jù)應(yīng)用將進入快速增長期; (3)大數(shù)據(jù)產(chǎn)業(yè)生態(tài)環(huán)境逐步完善,相關(guān)法律法規(guī)逐步健全; (4)大數(shù)據(jù)安全將成為產(chǎn)業(yè)發(fā)展的重要保障。