中國大數(shù)據(jù)利用率僅0.4%？行業(yè)大咖教你如何用大數(shù)據(jù)

中國大數(shù)據(jù) 利用率大咖

36大數(shù)據(jù) | 2017-09-12 11:53

【數(shù)據(jù)猿導(dǎo)讀】中國的大數(shù)據(jù)利用率只有0.4%!9月7日，第五屆中國云計算大會的“大數(shù)據(jù)及人工智能”分論壇上，相關(guān)專家的數(shù)據(jù)公布讓人們不禁為中國大數(shù)據(jù)領(lǐng)域的應(yīng)用擔憂。如何有效利用大數(shù)據(jù)，打造新型的智慧城市過程中大數(shù)據(jù)的重要地位，怎樣讓大數(shù)據(jù)與人工智能更好地服務(wù)企業(yè)，助推中國經(jīng)濟發(fā)展。...

中國大數(shù)據(jù)利用率僅0.4%？行業(yè)大咖教你如何用大數(shù)據(jù)

中國的大數(shù)據(jù)利用率只有0.4%!9月7日，第五屆中國云計算大會的“大數(shù)據(jù)及人工智能”分論壇上，相關(guān)專家的數(shù)據(jù)公布讓人們不禁為中國大數(shù)據(jù)領(lǐng)域的應(yīng)用擔憂。如何有效利用大數(shù)據(jù)，打造新型的智慧城市過程中大數(shù)據(jù)的重要地位，怎樣讓大數(shù)據(jù)與人工智能更好地服務(wù)企業(yè)，助推中國經(jīng)濟發(fā)展。現(xiàn)場的行業(yè)大咖們各抒己見。

論壇上，大數(shù)據(jù)算法與分析技術(shù)國家工程實驗室社會大數(shù)據(jù)分析與應(yīng)用中心主任趙璽，北京供銷大數(shù)據(jù)集團首席信息官楊正洪，北京開數(shù)科技有限公司總裁熊梓楷，PingCAP工程部副總裁沈礫和京東資深云架構(gòu)師石穎，分別做了主題分享。

身處數(shù)據(jù)研究機構(gòu)，基于學術(shù)層面，趙璽主任的分享更具有宏觀和指導(dǎo)意義。

“不可否認，互聯(lián)網(wǎng)和云計算的深度發(fā)展，為我們的數(shù)字空間提供了骨架，而大數(shù)據(jù)又為數(shù)字空間提供了血和肉，我們越來越明顯地感到并列于我們物理空間的同時又一個網(wǎng)絡(luò)空間或者是數(shù)字空間在快速的發(fā)展。計算社會學，就是當代社會學界借助互聯(lián)網(wǎng)、云計算、生物劑量等現(xiàn)代科技手段，利用大數(shù)據(jù)、機器學習來獲取與分析數(shù)據(jù)，從而研究與解釋社會的一種新的方式?，F(xiàn)在的社會學界想研究社會，但是缺乏手段和工具，但是大數(shù)據(jù)和云計算的方式，他們可以對人類了行為或者社會運行規(guī)律達到真實準確的認知。”趙璽主任分析認為，學術(shù)界里有很多代表性的研究，包括組織內(nèi)部的郵件數(shù)據(jù)研究人們的互動行為，利用搜索數(shù)據(jù)分析流感的發(fā)病率與傳染情況，利用社交網(wǎng)站測量人的健康、心情、性格與行為方式等變量，利用家庭視頻檢控對嬰兒成長數(shù)據(jù)進行分析，研究社交情境對嬰兒的語言學習影響等。

“所以，在計算社會科學，我們看到很多的發(fā)展空間和潛力，那主要發(fā)展路徑是什么呢第一，還是落到我們大數(shù)據(jù)和云計算上，大數(shù)據(jù)的獲取與解析。第二個路徑是人工處理與計算機方法的融合應(yīng)用。另外還有社會互互聯(lián)網(wǎng)的研究，這種研究范式包括騰訊、京東他們都在用這方面的研究來做實例測試。最后，新型社會集散工具的研制與開發(fā)，這和我們大數(shù)據(jù)底層的技術(shù)是相關(guān)比較大的，一方面是自動化數(shù)據(jù)獲取工具，數(shù)據(jù)分析算法，數(shù)據(jù)分析平臺，可視化方法，我們做的可能偏數(shù)據(jù)分析方法和可視化方法。我們工程研究中心主要現(xiàn)在用的是關(guān)于人的手機上的行為數(shù)據(jù)，來做相關(guān)的研究。因為在2009年的時候，nature發(fā)現(xiàn)手機已經(jīng)遍布全國90%以上的人了，所以這樣的非常有研究價值，這是一個人一天的行為數(shù)據(jù)。意大利的一些電信運營商已經(jīng)公開了這部分數(shù)據(jù)來供研究。我們可以看到，用這樣的數(shù)據(jù)可以做到很多領(lǐng)域的應(yīng)用，包括人道主義救援，公共衛(wèi)生管理，氣象災(zāi)害應(yīng)急，農(nóng)業(yè)食品安全，交通城市規(guī)劃，能源和國家調(diào)研統(tǒng)計，這樣的數(shù)據(jù)都可以用到這些領(lǐng)域里面。”

北京供銷大數(shù)據(jù)集團首席信息官楊正洪，在論壇上分享了企業(yè)大數(shù)據(jù)管理平臺的架構(gòu)和整體運營思路。

北京供銷大數(shù)據(jù)集團的大數(shù)據(jù)建設(shè)整體架構(gòu)分成三層。自下而上，第一層是大數(shù)據(jù)的基礎(chǔ)平臺，也叫云平臺，包括了計算資源、存儲資源、網(wǎng)絡(luò)資源和大數(shù)據(jù)的一些基礎(chǔ)的架構(gòu);第二層是大數(shù)據(jù)管理平臺，主要是從很多的業(yè)務(wù)系統(tǒng)整合數(shù)據(jù)，管控數(shù)據(jù)，然后提供數(shù)據(jù);第三層是對數(shù)據(jù)做分析，使用如機器學習、挖掘算法等新技術(shù)。“要建設(shè)好大數(shù)據(jù)，需要組織保障，制定標準規(guī)范體系，而當所有數(shù)據(jù)整合時，數(shù)據(jù)信息安全就顯得十分重要。以上就是大數(shù)據(jù)建設(shè)的總體架構(gòu)。”

楊正洪在講解了企業(yè)的大數(shù)據(jù)平臺構(gòu)架后，以保險行業(yè)客戶為例做了詳細的分析。大數(shù)據(jù)平臺在新型智慧城市中占據(jù)怎樣的位置建設(shè)大數(shù)據(jù)管理平臺，實現(xiàn)整個的數(shù)據(jù)整合、管控和服務(wù)，一般需要幾個系統(tǒng) 大數(shù)據(jù)管理平臺軟件提供商需要提供哪些軟件北京供銷大數(shù)據(jù)集團的大數(shù)據(jù)管理平臺經(jīng)驗分享可謂是干貨滿滿，也讓更多的人意識到大數(shù)據(jù)的價值。

但是，企業(yè)對大數(shù)據(jù)的利用普遍偏低，而且企業(yè)也不知道應(yīng)該怎么去挖掘數(shù)據(jù)價值。對此，開數(shù)科技總裁熊梓楷給出了自己對看法和經(jīng)驗。

“大數(shù)據(jù)應(yīng)用”痛點首先出現(xiàn)在數(shù)據(jù)的整合領(lǐng)域。“我們之前做過戰(zhàn)略、咨詢、金融，還有其他的創(chuàng)業(yè)經(jīng)驗，我發(fā)現(xiàn)，企業(yè)數(shù)據(jù)存在不同的數(shù)據(jù)庫，不同的系統(tǒng)是不同的供應(yīng)商建設(shè)，每個系統(tǒng)不相通，大家的數(shù)據(jù)無法統(tǒng)一。對此，我們做了第一件事就是數(shù)據(jù)整合。”熊梓楷說，但這涉及到兩個非常關(guān)鍵的因素：做數(shù)據(jù)整合的人都非常懂業(yè)務(wù);數(shù)據(jù)必須是非常容易可得的，電子化的。

隨后，熊梓楷從三個場景分析了如何解決大數(shù)據(jù)應(yīng)用上的問題——定位和預(yù)測、通過人工智能的算法預(yù)測場景未來的表現(xiàn)、如何用人工智能算法匹配外部和內(nèi)部的數(shù)據(jù)，發(fā)現(xiàn)更多的商機。

PingCAP的工程部副總裁沈礫，基于公司的數(shù)據(jù)庫業(yè)務(wù)，帶來了《數(shù)據(jù)庫在場景下的應(yīng)用》主題分享。在沈礫看來，數(shù)據(jù)庫存發(fā)展了幾十年，從1970年開始就有各種數(shù)據(jù)庫出來，比較優(yōu)秀的商業(yè)代表DP2，有一些Mysql，這些數(shù)據(jù)庫在支撐業(yè)務(wù)發(fā)展的過程中起了很多的作用。但是這些數(shù)據(jù)庫隨著業(yè)務(wù)量不斷擴大，出現(xiàn)了計算資源不夠等問題。

對此，沈礫詳細講解了企業(yè)所提供的行之有效的解決方法，如正在計劃做code generation，優(yōu)化分布式計算引擎支持更加復(fù)雜的算法，此外，還做了存儲引擎等。“不管是我們的分布式計算框架，還是比較強大的SQL優(yōu)化器，還是從上到下的包括SPark的擴展，還有我們要做的事情，我們只是想通過這樣的手段，使不同的業(yè)務(wù)在一套場景中做的更好，讓大家不用忍受數(shù)據(jù)報表的延遲，更快更好的得到數(shù)據(jù)。”

京東資深云架構(gòu)師石穎重點分享了京東在人工智能落地的商業(yè)和技術(shù)實踐經(jīng)驗。石穎認為，推進京東在未來的12年成為一個新的智慧的商業(yè)體，其中人工智能的力量顯然是不可忽視的。首先，電商場景。電商可以說是京東在人的心目中是最深刻的，甚至是唯一的印象。人工智能技術(shù)在這里的應(yīng)用，已經(jīng)覆蓋了從電商入口，到用戶購買的場景，再到支付階段，還有用戶評價體系等，甚至可以做到千人千面的精準營銷。

石穎的介紹中最讓人關(guān)注的是京東在金融場景下的相關(guān)應(yīng)用。“實際上，我們金融有九大板塊，供應(yīng)鏈金融、消費者金融、支付、農(nóng)村金融，還有一些信貸和保險方面，已經(jīng)形成了非常完整的一個生態(tài)系統(tǒng)。在這里，我們現(xiàn)在用的最多的是人工智能技術(shù)中的風控系統(tǒng)，如安全魔方。在安全魔方上，我們會依賴龐大用戶網(wǎng)購的行為數(shù)據(jù)，構(gòu)建風險量化平臺。”

此外，物流方面，京東物流是中國國內(nèi)，甚至全球唯一一個具有中小件、大件和冷鏈三套業(yè)務(wù)體系的物流公司。除了有數(shù)據(jù)中心的整個機器學習的基于服務(wù)器的后臺系統(tǒng)之外，物流體系還涉及一些邊緣計算。“京東是要搭建全國第一個低空基于無人機的干線物流網(wǎng)，我們會在不同的機場建立我們的配送點，在這干線上面使用無人機進行貨物搬運。無人倉內(nèi)，機器人的款式就有很多，堆垛機或者是傳送帶自動識別的一些東西，他們都非常廣泛應(yīng)用機器人自動識別的技術(shù)等。以上就是我們的京東的大數(shù)據(jù)在我們自己企業(yè)內(nèi)部的應(yīng)用場景。”

而支撐京東如此龐大智能化運轉(zhuǎn)的就是“京東云”。它目前擁有大概20萬的最大集群規(guī)模的集群，在數(shù)據(jù)處理能力上每天超過15P。目前活躍用戶是2.58億。

構(gòu)建云架構(gòu)，利用大數(shù)據(jù)和云計算提升企業(yè)的業(yè)務(wù)效率，充分利用人工智能化提高企業(yè)生產(chǎn)效率，更好的服務(wù)客戶，云時代給了人們更加廣闊的想想和發(fā)展空間。而知名企業(yè)大咖們的現(xiàn)身說法，也讓到場的行業(yè)技術(shù)人士、企業(yè)代表們對大數(shù)據(jù)的應(yīng)用和實踐有了更為清晰的認識，拓展了企業(yè)發(fā)展的數(shù)據(jù)化、智能化運營思路。

來源：36大數(shù)據(jù)

收藏分享

聲明：數(shù)據(jù)猿尊重媒體行業(yè)規(guī)范，相關(guān)內(nèi)容都會注明來源與作者；轉(zhuǎn)載我們原創(chuàng)內(nèi)容時，也請務(wù)必注明“來源：數(shù)據(jù)猿”與作者名稱，否則將會受到數(shù)據(jù)猿追責。