數(shù)據(jù)流最初是通信領(lǐng)域使用的概念,代表傳輸中所使用的信息的數(shù)字編碼信號(hào)序列。然而,我們所提到的數(shù)據(jù)流概念與此不同。這個(gè)概念最初在1998年由Henzinger在文獻(xiàn)87中提出,他將數(shù)據(jù)流定義為“只能以事先規(guī)定好的順序被讀取一次的數(shù)據(jù)的一個(gè)序列”。
數(shù)據(jù)流應(yīng)用的產(chǎn)生的發(fā)展是以下兩個(gè)因素的結(jié)果:
細(xì)節(jié)數(shù)據(jù):
已經(jīng)能夠持續(xù)自動(dòng)產(chǎn)生大量的細(xì)節(jié)數(shù)據(jù)。這類數(shù)據(jù)最早出現(xiàn)于傳統(tǒng)的銀行和股票交易領(lǐng)域,后來則也出現(xiàn)在地質(zhì)測(cè)量、氣象、天文觀測(cè)等方面。尤其是互聯(lián)網(wǎng)(網(wǎng)絡(luò)流量監(jiān)控,點(diǎn)擊流)和無線通信網(wǎng)(通話記錄)的出現(xiàn),產(chǎn)生了大量的數(shù)據(jù)流類型的數(shù)據(jù)。我們注意到這類數(shù)據(jù)大都與地理信息有一定關(guān)聯(lián),這主要是因?yàn)榈乩硇畔⒌木S度較大,容易產(chǎn)生這類大量的細(xì)節(jié)數(shù)據(jù)。
復(fù)雜分析:
需要以近實(shí)時(shí)的方式對(duì)更新流進(jìn)行復(fù)雜分析。對(duì)以上領(lǐng)域的數(shù)據(jù)進(jìn)行復(fù)雜分析(如趨勢(shì)分析,預(yù)測(cè))以前往往是(在數(shù)據(jù)倉(cāng)庫(kù)中)脫機(jī)進(jìn)行的,然而一些新的應(yīng)用(尤其是在網(wǎng)絡(luò)安全和國(guó)家安全領(lǐng)域)對(duì)時(shí)間都非常敏感,如檢測(cè)互聯(lián)網(wǎng)上的極端事件、欺詐、入侵、異常,復(fù)雜人群監(jiān)控,趨勢(shì)監(jiān)控,探查性分析,和諧度分析等,都需要進(jìn)行聯(lián)機(jī)的分析。
在此之后,學(xué)術(shù)界基本認(rèn)可了這個(gè)定義,有的文章也在此基礎(chǔ)上對(duì)定義稍微進(jìn)行了修改。例如,S. Guha等認(rèn)為,數(shù)據(jù)流是“只能被讀取一次或少數(shù)幾次的點(diǎn)的有序序列”,這里放寬了前述定義中的“一遍”限制。
-
數(shù)據(jù)流
+關(guān)注
關(guān)注
0文章
129瀏覽量
16566
發(fā)布評(píng)論請(qǐng)先 登錄
系統(tǒng)講解從Deployment到Service的完整數(shù)據(jù)流
基于雙復(fù)旦微青龍100TAI+V7 690T多功能信號(hào)處理平臺(tái)開發(fā)
EsDA科普 | AWFlow數(shù)據(jù)流圖開發(fā):讓嵌入式開發(fā)像搭積木一樣簡(jiǎn)單
使用簡(jiǎn)儀科技產(chǎn)品構(gòu)建高速數(shù)據(jù)流盤與回放系統(tǒng)解決方案
歐姆龍推出全新數(shù)據(jù)流邊緣控制器DX1
在以下嵌入式軟件設(shè)計(jì)模型中,屬于數(shù)據(jù)流模型的是,哪里有設(shè)計(jì)模型的介紹?
可信數(shù)據(jù)空間解鎖數(shù)據(jù)流新范式
求助,關(guān)于stm32H7多DMA數(shù)據(jù)流問題求解
用IS8000軟件和WT5000功率分析儀的DS波形數(shù)據(jù)流功能分析形數(shù)據(jù)
RDMA簡(jiǎn)介9之AXI 總線協(xié)議分析2
AD7401A隔離式Σ-Δ調(diào)制器技術(shù)手冊(cè)
數(shù)據(jù)流是什么
評(píng)論