《大數(shù)據(jù)的2016，我的2016》之技術(shù)篇

大數(shù)據(jù) 大數(shù)據(jù)技術(shù) 算法

jean | 2017-02-24 10:15

【數(shù)據(jù)猿導(dǎo)讀】本篇《大數(shù)據(jù)系列》文章是數(shù)據(jù)猿推出的主題為《大數(shù)據(jù)的2016，我的2016》2016—2017年度大型策劃活動的征文部分。為了方便大家更系統(tǒng)的閱讀，小編對這36篇文章進行了分類，本文是《大數(shù)據(jù)的2016，我的2016》之技術(shù)篇

本篇《大數(shù)據(jù)系列》文章是數(shù)據(jù)猿推出的主題為《大數(shù)據(jù)的2016，我的2016》2016—2017年度大型策劃活動的征文部分（落地部分請看文末）。在2016年底征稿期，活動就受到了100+大數(shù)據(jù)領(lǐng)域內(nèi)知名企業(yè)的高度關(guān)注，收到了36位業(yè)內(nèi)領(lǐng)袖的投稿，并入駐成為數(shù)據(jù)猿專欄專家。

為了方便大家更系統(tǒng)的閱讀，小編對這36篇文章進行了分類，本文是《大數(shù)據(jù)的2016，我的2016》之技術(shù)篇！

在2月16日的落地活動部分，數(shù)據(jù)猿聯(lián)合中歐國際工商學(xué)院以及騰訊直播舉辦了“中歐微論壇|數(shù)據(jù)猿·超聲波——以數(shù)據(jù)思維擁抱智能時代”活動。

一、易觀CTO郭煒：大數(shù)據(jù)也進入了下半場，業(yè)務(wù)與算法是重中之重

在喊了一年的資本寒冬后，大數(shù)據(jù)也進入了下半場，收入和增長成為大數(shù)據(jù)公司融資下半場的門票，而打贏下半場兩個核心圍繞業(yè)務(wù)理解和核心算法逐步展開。

準(zhǔn)確業(yè)務(wù)的理解、抓住痛點可以確保大數(shù)據(jù)不是空中樓閣，幫助企業(yè)解決實際問題從而獲得高額收入。

而算法的門檻是繼大數(shù)據(jù)采集、數(shù)據(jù)并行計算之后新的技術(shù)門檻。大數(shù)據(jù)結(jié)合現(xiàn)在被炒的火爆的AI算法，在互聯(lián)網(wǎng)、零售、金融等很多領(lǐng)域建立起各領(lǐng)域的數(shù)據(jù)模型，隨著數(shù)據(jù)反復(fù)驗證，數(shù)據(jù)模型將會越來越精準(zhǔn)，在行業(yè)中擁有行業(yè)理解、數(shù)據(jù)和算法迭代能力的公司逐步立于不敗之地。

只有技術(shù)或者只有業(yè)務(wù)方案都不能成為一個完整的大數(shù)據(jù)解決方案，需要對業(yè)務(wù)本身的深刻理解加上過硬的技術(shù)和落地實施能力才可以幫助企業(yè)通過數(shù)據(jù)提效避險。

原文鏈接：http://www.getteks.net/article/9769.htm

二、星環(huán)科技創(chuàng)始人兼CTO孫元浩：大數(shù)據(jù)技術(shù)的四大發(fā)展趨勢

大數(shù)據(jù)技術(shù)發(fā)展到今天已經(jīng)出現(xiàn)了很多的新技術(shù)，主要分為5層：存儲引擎層、資源框架層、通用計算引擎層、領(lǐng)域級引擎層、分析工具管理層。未來，大數(shù)據(jù)技術(shù)發(fā)展主要呈現(xiàn)以下幾個發(fā)展趨勢：

1、分布式計算已經(jīng)逐漸成為主流計算方式?；贖adoop的計算引擎能夠像傳統(tǒng)的數(shù)據(jù)倉庫產(chǎn)品一樣完成大量數(shù)據(jù)的批處理工作，分布式計算已經(jīng)被證明比傳統(tǒng)技術(shù)更加高效、更具有性價比的方案

2、交互式分析技術(shù)日益成熟。以前大家希望通過批處理改造成適用于交互式分析，但實際應(yīng)用中這樣的技術(shù)思路并不能達到預(yù)期效果。如果借助Cube技術(shù)，可以顯著提升OLAP性能，并且系統(tǒng)性能可以得到50-500倍的提升。Cube技術(shù)適用于需要固定報表并提供簡單靈活自助分析的應(yīng)用場景——具備準(zhǔn)實時的交互式分析技術(shù)。

3、數(shù)據(jù)分析算法逐漸豐富，工具普及化。數(shù)據(jù)分析的算法有很多種，但企業(yè)花費大量的時間在數(shù)據(jù)清洗和特征的選擇上，缺少自動化選擇特征指標(biāo)工具。

4、融合事件驅(qū)動和批處理引擎。隨著應(yīng)用需求的復(fù)雜化，對低延時和復(fù)雜編程模型的需求在不斷增加。通過對引擎的重構(gòu)，改造成了事件驅(qū)動的計算模型，大幅度降低了延時，同時支持SQL語言批處理編程模型，能夠?qū)Ψ浅?fù)雜的環(huán)境下進行實時處理。

原文鏈接：http://www.getteks.net/article/9828.htm

三、六禾創(chuàng)投合伙人杜挺：缺數(shù)據(jù)不可怕，技術(shù)才是大數(shù)據(jù)公司真正的壁壘

2016年下半年，整個大數(shù)據(jù)領(lǐng)域在資本市場上出現(xiàn)了急轉(zhuǎn)直下式的發(fā)展，這讓本來就很年輕的大數(shù)據(jù)企業(yè)每一步走的都如履薄冰，但從我們自身的投資角度來看，我們更愛投企業(yè)服務(wù)和數(shù)據(jù)領(lǐng)域的創(chuàng)業(yè)項目了，因為在大的市場轉(zhuǎn)變周期中，唯有技術(shù)創(chuàng)新才能達到增量市場。

另外，國內(nèi)的大數(shù)據(jù)產(chǎn)業(yè)仍處在初級階段，商用價值仍未完整展現(xiàn)，市場前景一片廣闊。從數(shù)據(jù)流轉(zhuǎn)的角度講，大數(shù)據(jù)領(lǐng)域通用技術(shù)，主要是包含基于Hadoop等底層基礎(chǔ)平臺的處理數(shù)據(jù)技術(shù)，包括數(shù)據(jù)采集、數(shù)據(jù)處理、數(shù)據(jù)分析、數(shù)據(jù)可視化等。其中底層基礎(chǔ)平臺主要解決了數(shù)據(jù)存儲問題，而通用技術(shù)則解決了從數(shù)據(jù)采集到數(shù)據(jù)分析的問題。

對于一個想做數(shù)據(jù)方向的企業(yè)來講，只有技術(shù)才是真正的壁壘，數(shù)據(jù)可以用多種方法去獲取。所以優(yōu)秀的數(shù)據(jù)公司一定是核心技術(shù)為驅(qū)動，優(yōu)秀產(chǎn)品為導(dǎo)向，數(shù)據(jù)為貫穿整個產(chǎn)品線，將產(chǎn)品、運營、銷售等各方面穿在一起。

原文鏈接：http://www.getteks.net/article/9870.htm

四、GrowingIO創(chuàng)始人兼CEO張溪夢：數(shù)據(jù)分析廠商如何更好的為客戶創(chuàng)造價值

在海外，數(shù)據(jù)分析市場已經(jīng)非常成熟，各類工具也很豐富，但是國內(nèi)的很多公司還停留在只盯著PV、UV、訪問時長、跳出率等最基礎(chǔ)的數(shù)據(jù)上。在互聯(lián)網(wǎng)下半場，人口、流量、資本的紅利已經(jīng)褪去，獲取客戶和運營產(chǎn)品的成本將大大增加，成本的增加就導(dǎo)致企業(yè)必須要對其運營效率進行顯著優(yōu)化，對用戶進行更精細化的管理。數(shù)據(jù)分析廠商可以從三個點入手，為客戶創(chuàng)造更高的價值：

1、基于云端的 SaaS 模式。目前來看，云端解決方案”無論在性價比、時效性、可用性方面都會比傳統(tǒng)軟件模式更有優(yōu)勢。

2、將數(shù)據(jù)分析力融入產(chǎn)品。數(shù)據(jù)分析廠商要不斷把數(shù)據(jù)分析師的思路相對統(tǒng)一地做到產(chǎn)品里去，讓用產(chǎn)品的人自然而然具備這種數(shù)據(jù)分析的思路。

3、產(chǎn)品設(shè)計要簡單、智能化、場景化。構(gòu)建一個具備場景化和商業(yè)結(jié)果導(dǎo)向的產(chǎn)品，比打造一個有無數(shù)功能堆積的數(shù)據(jù)工具更有意義。

原文鏈接：http://www.getteks.net/article/9767.htm

推薦閱讀：

《大數(shù)據(jù)的2016，我的2016》之人工智能篇

《大數(shù)據(jù)的2016，我的2016》之應(yīng)用篇

大咖云集，中歐微論壇|數(shù)據(jù)猿·超聲波活動圓滿落幕

人工智能時代來襲，人類該恐慌還是該冷靜？

世界上有些角落，我們真的不歡迎人工智能

來源：數(shù)據(jù)猿

收藏分享