首頁技術(shù)文章正文

什么樣的數(shù)據(jù)可以稱為大數(shù)據(jù)?

更新時間:2021-02-01 來源:黑馬程序員 瀏覽量:

大數(shù)據(jù)的特征有哪些?

一般認(rèn)為,大數(shù)據(jù)主要具有以下4個方面的典型特征,即大量(Volume)、多樣(Variety)、高速(Velocity)和價值(Value),即所謂的4V,接下來,通過一張圖來具休描述。

大數(shù)據(jù)的特征

1. Volume(大量)

大數(shù)據(jù)的特征首先就是數(shù)據(jù)規(guī)模大。隨著互聯(lián)網(wǎng)、物聯(lián)網(wǎng)、移動互聯(lián)技術(shù)的發(fā)展,人和事物的所有軌跡都可以被記錄下來,數(shù)據(jù)呈現(xiàn)出爆發(fā)性增長。數(shù)據(jù)相關(guān)計量單位的換算關(guān)系如下表所示。

單位 換算格式
Byte 1Byte=1024bit
KB 1KB= 1024Byte
MB 1MB= 1024KB
GB 1GB= 1024MB
TB 1TB= 1024GB
PB 1PB= 1024TB
EB 1EB= 1024PB
ZB 1ZB= 1024EB

2. Variety(多樣)

數(shù)據(jù)來源的廣泛性,決定了數(shù)據(jù)形式的多樣性。大數(shù)據(jù)可以分為三類,一是結(jié)構(gòu)化數(shù)據(jù),如財務(wù)系統(tǒng)數(shù)據(jù)、信息管理系統(tǒng)數(shù)據(jù)、醫(yī)療系統(tǒng)數(shù)據(jù)等,其特點(diǎn)是數(shù)據(jù)間因果關(guān)系強(qiáng);一是非結(jié)構(gòu)化的數(shù)據(jù),如視頻、圖片、音頻等,其特點(diǎn)是數(shù)據(jù)間沒有因果關(guān)系;三是半結(jié)構(gòu)化數(shù)據(jù),如HTML文檔、郵件、網(wǎng)頁等,其特點(diǎn)是數(shù)據(jù)間的因果關(guān)系弱。有統(tǒng)計顯示,目前結(jié)構(gòu)化數(shù)據(jù)占據(jù)整個互聯(lián)網(wǎng)數(shù)據(jù)量的75%以上,而產(chǎn)生價值的大數(shù)據(jù),往往是這些非結(jié)構(gòu)化數(shù)據(jù)。

3.Velocity(高速)

數(shù)據(jù)的增長速度和處理速度是大數(shù)據(jù)高速性的重要體現(xiàn)。與以往的報紙、書信等傳統(tǒng)數(shù)據(jù)載體生產(chǎn)傳播方式不同,在大數(shù)據(jù)時代,大數(shù)據(jù)的交換和傳播主要是通過互聯(lián)網(wǎng)和云計算等方式實(shí)現(xiàn)的,其生產(chǎn)和傳播數(shù)據(jù)的速度是非常迅速的。另外,大數(shù)據(jù)還要求處理數(shù)據(jù)的響應(yīng)速度要快,例如,上億條數(shù)據(jù)的分析必須在幾秒內(nèi)完成。數(shù)據(jù)的輸人、處理與丟棄必須立刻見效,幾乎無延遲。

4.Value(價值)

大數(shù)據(jù)的核心特征是價值,其實(shí)價值密度的高低和數(shù)據(jù)總量的大小是成反比的,即數(shù)據(jù)價值密度越高數(shù)據(jù)總量越小,數(shù)據(jù)價值密度越低數(shù)據(jù)總量越大。任何有價值的信息的提取依托的就是海量的基礎(chǔ)數(shù)據(jù)。當(dāng)然目前大數(shù)據(jù)背景下有個未解決的問題,如何通過強(qiáng)大的機(jī)器算法更迅速地在海量數(shù)據(jù)中完成數(shù)據(jù)的價值提純。



猜你喜歡:

大數(shù)據(jù)能干什么?淺談大數(shù)據(jù)的應(yīng)用場景

大數(shù)據(jù)離散流是什么?它的內(nèi)部結(jié)構(gòu)是怎樣的?

大數(shù)據(jù)的兩種計算框架對比,哪個更適合開發(fā)?

黑馬大數(shù)據(jù)工程師培訓(xùn)課程

分享到:
在線咨詢 我要報名
和我們在線交談!