[譯] 流數(shù)據(jù)處理：大數(shù)據(jù)領(lǐng)域的下一個(gè)重頭戲

大數(shù)據(jù) 流數(shù)據(jù)

極客頭條 | 2016-09-18 11:08

【數(shù)據(jù)猿導(dǎo)讀】流數(shù)據(jù)處理可能會(huì)成為大數(shù)據(jù)領(lǐng)域的下一個(gè)重頭戲，隨著幾個(gè)開源項(xiàng)目 Flink、Beam和 Apex打出的流處理引擎廣告，我們決定進(jìn)去一探究竟，為數(shù)據(jù)湖泊的用戶測試一下它們

[譯] 流數(shù)據(jù)處理：大數(shù)據(jù)領(lǐng)域的下一個(gè)重頭戲

流數(shù)據(jù)處理可能會(huì)成為大數(shù)據(jù)領(lǐng)域的下一個(gè)重頭戲，隨著幾個(gè)開源項(xiàng)目 Flink、Beam和 Apex打出的流處理引擎廣告，我們決定進(jìn)去一探究竟，為數(shù)據(jù)湖泊的用戶測試一下它們。Flink似乎在這部分是最成熟的，剛剛發(fā)布了1.0.0版本。

用例

我們想流化股票價(jià)格，開發(fā)一個(gè)實(shí)時(shí)指標(biāo)功能，然后報(bào)告給用戶。在這種情況下，我們的指標(biāo)采用5分鐘移動(dòng)平均價(jià)。不妨和現(xiàn)實(shí)世界的例子做個(gè)對照，有時(shí)這個(gè)價(jià)格被交易者們用來獲得一種對安全的感覺，即當(dāng)前價(jià)格是被低估還是高估的，盡管現(xiàn)實(shí)使用的時(shí)間間隔更大。

對多數(shù)經(jīng)濟(jì)分析而言，最大的障礙之一就是尋找免費(fèi)的數(shù)據(jù)來源，幸運(yùn)的是，谷歌給我們提供了一個(gè)每分鐘都能安全獲取到JSON格式的當(dāng)前價(jià)格最新數(shù)據(jù)的URL網(wǎng)址。

來源：極客頭條

收藏分享

聲明：數(shù)據(jù)猿尊重媒體行業(yè)規(guī)范，相關(guān)內(nèi)容都會(huì)注明來源與作者；轉(zhuǎn)載我們原創(chuàng)內(nèi)容時(shí)，也請務(wù)必注明“來源：數(shù)據(jù)猿”與作者名稱，否則將會(huì)受到數(shù)據(jù)猿追責(zé)。