首頁技術文章正文

什么是大數(shù)據?大數(shù)據有什么特征?

更新時間:2020-07-16 來源:黑馬程序員 瀏覽量:


什么是大數(shù)據?


高速發(fā)展的信息時代,新一輪科技革命和變革正在加速推進,技術創(chuàng)新日益成為重塑經濟發(fā)展模式和促進經濟增長的重要驅動力量,而“大數(shù)據”無疑是核心推動力。

那么,什么是“大數(shù)據”呢?如果從字面意思來看,大數(shù)據指的是巨量數(shù)據。那么可能有人會問,多大量級的數(shù)據才叫大數(shù)據?不同的機構或學者有不同的理解,難以有一個非常定量的定義,只能說,大數(shù)據的計量單位已經越過TB級別發(fā)展到PB、EB、ZB、YB甚至BB來衡量。

最早提出“大數(shù)據”這一概念的是全球知名咨詢公司麥肯錫,他是這樣定義大數(shù)據的:一種規(guī)模大到在獲取、存儲、管理、分析方面大大超出了傳統(tǒng)數(shù)據庫軟件工具能力范圍的數(shù)據集合,具有海量的數(shù)據規(guī)模、快速的數(shù)據流轉、多樣的數(shù)據類型以及價值密度四大特征。

研究機構Gartner是這樣定義大數(shù)據的:“大數(shù)據”是需要新處理模式才能具有更強的決策力、洞察發(fā)現(xiàn)力和流轉優(yōu)化能力來適應海量、高增長率和多樣化的信息資產。

若從技術角度來看,大數(shù)據的戰(zhàn)略意義不在于掌握龐大的數(shù)據,而在于對這些含有意義的數(shù)據進行專業(yè)化處理,換言之,如果把大數(shù)據比作一種產業(yè),那么這種產業(yè)盈利的關鍵在于提高對數(shù)據的“加工能力”,通過“加工”實現(xiàn)數(shù)據的“增值”。

大數(shù)據有什么特征?

一般認為,大數(shù)據主要具有以下四個方面的典型特征,即大量(Volume)、多樣(Varity)、高速(Velocity)和價值(Value),即所謂的“4V”,接下來,通過一張圖來描述,具體圖1所示。

img

圖1  大數(shù)據4V特征

接下來針對圖1中的4V特征進行簡要介紹,具體如下:

1.Volume(大量)

大數(shù)據的特征首先就是數(shù)據規(guī)模大。隨著互聯(lián)網、物聯(lián)網、移動互聯(lián)技術的發(fā)展,人和事物的所有軌跡都可以被記錄下來,數(shù)據呈現(xiàn)出爆發(fā)性增長。數(shù)據相關計量單位的換算關系如表1所示。

表1    單位換算關系

單位換算公式
Byte1 Byte = 8 bit
KB1 KB = 1024 Byte
MB1 MB = 1024 KB
GB1 GB = 1024 MB
TB1 TB = 1024 GB
PB1 PB = 1024 TB
EB1 EB = 1024 PB
ZB1 ZB = 1024 EB


2.Variety(多樣)

數(shù)據來源的廣泛性,決定了數(shù)據形式的多樣性。大數(shù)據可以分為三類,一是結構化數(shù)據,如財務系統(tǒng)數(shù)據、信息管理系統(tǒng)數(shù)據、醫(yī)療系統(tǒng)數(shù)據等,其特點是數(shù)據間因果關系強;二是非結構化的數(shù)據,如視頻、圖片、音頻等,其特點是數(shù)據間沒有因果關系;三是半結構化數(shù)據,如HTML文檔、郵件、網頁等,其特點是數(shù)據問的因果關系弱。有統(tǒng)計顯示,目前結構化數(shù)據占據整個互聯(lián)網數(shù)據量的75%以上,而產生價值的大數(shù)據,往往是這些非結構化數(shù)據。

3.Velocity(高速)

數(shù)據的增長速度和處理速度是大數(shù)據高速性的重要體現(xiàn)。與以往的報紙、書信等傳統(tǒng)數(shù)據載體生產傳播方式不同,在大數(shù)據時代,大數(shù)據的交換和傳播主要是通過互聯(lián)網和云計算等方式實現(xiàn)的,其生產和傳播數(shù)據的速度是非常迅速的。另外,大數(shù)據還要求處理數(shù)據的響應速度要快,例如,上億條數(shù)據的分析必須在幾秒內完成。數(shù)據的輸入、處理與丟棄必須立刻見效,幾乎無延遲。

4.Value(價值)

大數(shù)據的核心特征是價值,其實價值密度的高低和數(shù)據總量的大小是成反比的,即數(shù)據價值密度越高數(shù)據總量越小,數(shù)據價值密度越低數(shù)據總量越大。任何有價值的信息的提取依托的就是海量的基礎數(shù)據,當然目前大數(shù)據背景下有個未解決的問題,如何通過強大的機器算法更迅速的在海量數(shù)據中完成數(shù)據的價值提純。

猜你喜歡:
大數(shù)據培訓課程

分享到:
在線咨詢 我要報名
和我們在線交談!