實(shí)時(shí)處理大數(shù)據(jù) 如何才能最大限度發(fā)揮大數(shù)據(jù)的價(jià)值?

大數(shù)據(jù) 限度價(jià)值信息

36大數(shù)據(jù) | 2017-10-27 11:32

【數(shù)據(jù)猿導(dǎo)讀】日前在紐約舉行的Strata數(shù)據(jù)會(huì)議的展位上，Diwo公司提供了一個(gè)新的認(rèn)知決策平臺(tái)。并采用了這種有趣的方式來(lái)介紹他們新的解決方案，也許在無(wú)意中會(huì)有助于大數(shù)據(jù)市場(chǎng)的發(fā)展。

實(shí)時(shí)處理大數(shù)據(jù) 如何才能最大限度發(fā)揮大數(shù)據(jù)的價(jià)值?

大數(shù)據(jù)，數(shù)據(jù)科學(xué)，以及分析的發(fā)展與演變?cè)诮衲甑腟trata數(shù)據(jù)會(huì)議上得到全面展示，其中包含了一個(gè)重要的信息：人們需要獲取大數(shù)據(jù)的價(jià)值。

正如在一個(gè)數(shù)字表演節(jié)目中，人們選定的數(shù)字是83，認(rèn)為這會(huì)難倒魔術(shù)師，魔術(shù)師在一個(gè)4×4矩陣填寫(xiě)了16個(gè)數(shù)字，在組合之后，每行和每列之和都是83，并且數(shù)字在各行各列中沒(méi)有重復(fù)。魔術(shù)師說(shuō)，“看一下這個(gè)結(jié)果。如果將每一行的所有數(shù)字相加，則它們的總和為83，每列中的數(shù)字總和也是83。事實(shí)上，每一個(gè)組合加起來(lái)都是你選的數(shù)字。

太神奇了，對(duì)吧這就像人們?cè)讷@得到大量數(shù)據(jù)的時(shí)候的感受——就像魔術(shù)一樣!

日前在紐約舉行的Strata數(shù)據(jù)會(huì)議的展位上，Diwo公司提供了一個(gè)新的認(rèn)知決策平臺(tái)。并采用了這種有趣的方式來(lái)介紹他們新的解決方案，也許在無(wú)意中會(huì)有助于大數(shù)據(jù)市場(chǎng)的發(fā)展。

雖然人們一直在談?wù)摯髷?shù)據(jù)，數(shù)據(jù)科學(xué)和分析已經(jīng)有了相當(dāng)長(zhǎng)一段時(shí)間，但在今年Strata數(shù)據(jù)會(huì)議的活動(dòng)中，全面展現(xiàn)了市場(chǎng)的演變。可以看出在主題演講和展覽層面所貫穿的幾個(gè)交織的主題總結(jié)出的一個(gè)信息：現(xiàn)在是發(fā)揮大數(shù)據(jù)價(jià)值的時(shí)候了。

這些主題都涉及了一個(gè)廣泛的觀念，在現(xiàn)實(shí)生活中大規(guī)模應(yīng)用大數(shù)據(jù)，科學(xué)的數(shù)據(jù)和分析，現(xiàn)在是超越探索階段的時(shí)候了。而這樣規(guī)模的數(shù)據(jù)力量能夠改變業(yè)務(wù)模式和客戶體驗(yàn)，或許讓人們對(duì)這一切感覺(jué)有點(diǎn)像魔術(shù)。

使大數(shù)據(jù)更加真實(shí)

大數(shù)據(jù)在大多數(shù)情況下一直是技術(shù)上關(guān)注的領(lǐng)域。雖然商業(yè)影響總是很明確，但市場(chǎng)的焦點(diǎn)主要在于實(shí)驗(yàn)，以及找出如何解決大規(guī)模數(shù)據(jù)集所面臨的技術(shù)問(wèn)題的辦法。

當(dāng)然，大數(shù)據(jù)的成功應(yīng)用產(chǎn)生了巨大的業(yè)務(wù)成果，但市場(chǎng)的主要驅(qū)動(dòng)力是技術(shù)開(kāi)發(fā)，而不是業(yè)務(wù)應(yīng)用。然而在2017年將有一個(gè)明顯的變化。

首先，隨著行業(yè)的不斷發(fā)展，大數(shù)據(jù)的社會(huì)影響以及數(shù)據(jù)科學(xué)家和從業(yè)者必須發(fā)揮的重要作用將會(huì)顯著增加。

“數(shù)據(jù)毀滅武器：大數(shù)據(jù)如何加劇不平等并威脅民主”一文的作者，數(shù)學(xué)家Cathy O’Neil警告說(shuō)：“我們還沒(méi)有制定數(shù)據(jù)科學(xué)方面的標(biāo)準(zhǔn)。而糟糕的算法可能危及人們的生命…… 這對(duì)于人工智能來(lái)說(shuō)也是不公平的，它使現(xiàn)狀和所有隱含的偏差實(shí)現(xiàn)自動(dòng)化。這一點(diǎn)需要得到承認(rèn)，特別是當(dāng)我們將注意力集中在那些影響人們生活的事情時(shí)。”

聯(lián)合國(guó)兒童基金會(huì)創(chuàng)新辦公室首席科學(xué)家Manuel García-Herranz和美國(guó)國(guó)會(huì)圖書(shū)館創(chuàng)新者Jer Thorp也對(duì)數(shù)據(jù)對(duì)世界的正面和潛在的負(fù)面影響表示了類(lèi)似的看法。

Garcia-Herranz分享了聯(lián)合國(guó)兒童基金會(huì)如何整合數(shù)據(jù)科學(xué)和實(shí)時(shí)系統(tǒng)來(lái)發(fā)現(xiàn)的見(jiàn)解，同時(shí)仍然可以利用這些系統(tǒng)采取有意義的行動(dòng)并“為人類(lèi)應(yīng)用數(shù)據(jù)”。

另一方面，Thorp警告說(shuō)，人們所期望的客觀性可能阻止他們了解數(shù)據(jù)的實(shí)際功能和影響。他的建議很簡(jiǎn)單，但卻是深刻的：“不要坐談，而是需要實(shí)踐。”

與此同時(shí)，大數(shù)據(jù)和人工智能(AI)的交叉點(diǎn)也在加強(qiáng)了企業(yè)處理大數(shù)據(jù)主動(dòng)性的緊迫性。雖然大數(shù)據(jù)作為人工智能動(dòng)力的本質(zhì)已經(jīng)使二者共生，但人工智能作為企業(yè)高管面臨的頭號(hào)問(wèn)題，這正在使企業(yè)規(guī)模的大數(shù)據(jù)在戰(zhàn)略上占有一席之地。

實(shí)時(shí)處理大數(shù)據(jù)

將重點(diǎn)轉(zhuǎn)移到組織如何在現(xiàn)實(shí)世界中應(yīng)用大數(shù)據(jù)也帶來(lái)了第二個(gè)重要趨勢(shì)：實(shí)時(shí)應(yīng)用數(shù)據(jù)和分析的轉(zhuǎn)變。

越來(lái)越多的人認(rèn)識(shí)到事后分析并不是唯一的大數(shù)據(jù)用例，實(shí)際上這并不是最好的用例。許多組織現(xiàn)在意識(shí)到，通過(guò)在交易時(shí)應(yīng)用最終的分析和見(jiàn)解，他們可以利用大數(shù)據(jù)的最大價(jià)值。

有了這個(gè)用例，組織不僅可以使用回顧性數(shù)據(jù)進(jìn)行分析和規(guī)劃，而且可以使用它來(lái)塑造客戶體驗(yàn)，更好地進(jìn)行決策，并在消極結(jié)果發(fā)生之前降低風(fēng)險(xiǎn)。在交易點(diǎn)使用數(shù)據(jù)可以采取多種形式，應(yīng)該是任何現(xiàn)代大數(shù)據(jù)戰(zhàn)略的基本要素。

幾家科技公司已經(jīng)引入了工具和策略來(lái)幫助組織實(shí)時(shí)地整合他們從大數(shù)據(jù)計(jì)劃中獲得的見(jiàn)解和分析。這些包括(按字母順序)：

Cambridge Semantics：一種基于語(yǔ)義關(guān)系數(shù)據(jù)模型的端到端的探索性分析解決方案，通過(guò)根據(jù)業(yè)務(wù)環(huán)境構(gòu)建數(shù)據(jù)，實(shí)現(xiàn)實(shí)時(shí)分析，并縮短上市時(shí)間。

MapR：融合數(shù)據(jù)平臺(tái)，提供所謂的“數(shù)據(jù)結(jié)構(gòu)”，將傳統(tǒng)數(shù)據(jù)湖與流數(shù)據(jù)集成在一個(gè)單獨(dú)的，位置無(wú)關(guān)的和場(chǎng)景感知的平臺(tái)中。

Splice Machine：一種應(yīng)用程序開(kāi)發(fā)平臺(tái)，它創(chuàng)建一個(gè)新的“預(yù)測(cè)應(yīng)用程序”，將事務(wù)處理和分析處理合并，并將分析導(dǎo)出的洞察數(shù)據(jù)注入到應(yīng)用程序工作流程中。

Striim：實(shí)時(shí)數(shù)據(jù)集成和流分析平臺(tái)，可在攝入時(shí)分析數(shù)據(jù)，以便通過(guò)實(shí)時(shí)洞察來(lái)支持決策。

VoltDB：一個(gè)運(yùn)行數(shù)據(jù)平臺(tái)，可提供毫秒響應(yīng)時(shí)間的實(shí)時(shí)事件處理和分析。

雖然這些技術(shù)提供商正在采用不同的方法實(shí)時(shí)應(yīng)用大數(shù)據(jù)，但每個(gè)技術(shù)提供商都向企業(yè)組織提供一個(gè)相同的信息：現(xiàn)在是使用大數(shù)據(jù)的最佳時(shí)機(jī)。

使大數(shù)據(jù)工作

然而，如果一個(gè)組織無(wú)法在企業(yè)級(jí)和企業(yè)運(yùn)行模型中實(shí)現(xiàn)大數(shù)據(jù)的工作，那么理解大數(shù)據(jù)的實(shí)際含義并將其應(yīng)用程序轉(zhuǎn)移到交易點(diǎn)上就沒(méi)有任何好處。隨著組織試圖將大數(shù)據(jù)移到實(shí)驗(yàn)領(lǐng)域之外，走向全面的、企業(yè)級(jí)的應(yīng)用程序，它們遇到了重要的治理、管理和規(guī)模問(wèn)題。

因此，Strata會(huì)話展現(xiàn)的第三個(gè)主題是組織在企業(yè)規(guī)模上進(jìn)行大數(shù)據(jù)化工作的必要性，這并不奇怪。毫無(wú)疑問(wèn)，這一進(jìn)程的很大一部分需要文化和組織轉(zhuǎn)型。但也很清楚，組織還必須轉(zhuǎn)變?nèi)绾螒?yīng)用技術(shù)本身，使其在一定規(guī)模中工作。

一些科技公司展示了新的技術(shù)和技術(shù)驅(qū)動(dòng)的方法，他們認(rèn)為這將有助于企業(yè)組織應(yīng)對(duì)大數(shù)據(jù)企業(yè)的各個(gè)方面，包括(按字母順序排列)：

Dataguise：一個(gè)數(shù)據(jù)管理平臺(tái)，可發(fā)現(xiàn)，檢測(cè)，保護(hù)，以及監(jiān)控敏感信息，如PII，PCI和HIPPA，無(wú)論是否在組織的數(shù)據(jù)格局中。

Dataiku：一個(gè)大數(shù)據(jù)平臺(tái)，創(chuàng)建一個(gè)單一的數(shù)據(jù)流水線，打破孤島效應(yīng)，使數(shù)據(jù)科學(xué)家和數(shù)據(jù)分析人員能夠輕松協(xié)同工作，加快預(yù)測(cè)解決方案的部署速度。

DriveScale：一個(gè)軟件公司改變組織部署和使用所謂的“軟件可組合基礎(chǔ)架構(gòu)”的方式，以智能和高度動(dòng)態(tài)的方式連接分解的組件(計(jì)算和存儲(chǔ))。

Pure Storage：高效的存儲(chǔ)平臺(tái)，專(zhuān)門(mén)用于擴(kuò)展大數(shù)據(jù)部署，現(xiàn)代分析需求和人工智能。

Zaloni：一個(gè)數(shù)據(jù)湖管理平臺(tái)，專(zhuān)注于幫助企業(yè)實(shí)施數(shù)據(jù)湖，并迅速獲得規(guī)模化的業(yè)務(wù)價(jià)值。

發(fā)揮大數(shù)據(jù)的價(jià)值

大數(shù)據(jù)行業(yè)核心技術(shù)面臨的挑戰(zhàn)仍然存在，并將在可預(yù)見(jiàn)的未來(lái)持續(xù)下去。隨著數(shù)據(jù)呈指數(shù)級(jí)增長(zhǎng)，企業(yè)組織和服務(wù)于其的技術(shù)公司將繼續(xù)處在一場(chǎng)持續(xù)的戰(zhàn)斗中，使其變得易于管理。

然而，很明顯，組織現(xiàn)在正在開(kāi)始認(rèn)真應(yīng)對(duì)在整個(gè)企業(yè)中應(yīng)用大數(shù)據(jù)所帶來(lái)的挑戰(zhàn)，從而可以加速數(shù)字化轉(zhuǎn)型，為日益增長(zhǎng)的人工智能提供動(dòng)力。

而且很明顯，行業(yè)和企業(yè)組織都認(rèn)識(shí)到，為了實(shí)現(xiàn)大數(shù)據(jù)的承諾，他們需要獲得大數(shù)據(jù)的價(jià)值。

來(lái)源：36大數(shù)據(jù)

收藏分享

聲明：數(shù)據(jù)猿尊重媒體行業(yè)規(guī)范，相關(guān)內(nèi)容都會(huì)注明來(lái)源與作者；轉(zhuǎn)載我們?cè)瓌?chuàng)內(nèi)容時(shí)，也請(qǐng)務(wù)必注明“來(lái)源：數(shù)據(jù)猿”與作者名稱(chēng)，否則將會(huì)受到數(shù)據(jù)猿追責(zé)。