硅谷考察見聞之：這是我見過最好的講大數(shù)據(jù)的故事

硅谷大數(shù)據(jù) Palantir

宋洪濤 | 2016-05-18 17:59

【數(shù)據(jù)猿導讀】宋洪濤，索信達數(shù)據(jù)創(chuàng)始人&CEO，法學背景的他，卻“不務正業(yè)”，先從翻譯開始職業(yè)生涯，又轉道剛剛起步的IT市場，并于2004年在深圳創(chuàng)立了索信達數(shù)據(jù)。本文即他在考察硅谷時的見聞，希望對您能有些啟示

“利用倒時差的時間總結了一些這段時間在硅谷考察的見聞，分享給大家

Palantir，提起這家大數(shù)據(jù)公司，目前在美國風頭最勁的就是這家公司，國內網(wǎng)站信息的搜索結果基本上是幾個標簽：

融資很多，估值超200億美元，是當前硅谷估值最高的大數(shù)據(jù)公司。
協(xié)助美國CIA抓本拉登和發(fā)現(xiàn)麥道夫“龐氏騙局”。
創(chuàng)始人是paypal“黑幫”老大，神一樣的人物。
不下20家國內公司說自己要做palantir。

在揭開這家公司神秘的面紗之前，讓我們先通過Google了解看看這家公司。

Palantir公司創(chuàng)始團隊——群星璀璨

Palantir公司成立于2004年，共有五位創(chuàng)始人，分別是Peter Thiel，Stephen Cohen，Joe Lonsdale，KarpNathan Gettings和Alex 。而Peter Thiel是公司的靈魂人物。

在創(chuàng)立Palantir之前，Thiel就已經(jīng)很有名，他最廣為人知的身份是PayPal創(chuàng)始人。Thiel在1998年聯(lián)合創(chuàng)辦了PayPal(PayPal的前身之一是X，X是大名鼎鼎的特斯拉創(chuàng)始人Elon Musk創(chuàng)建的)，并在2002年以15億美元的價格將PayPal出售給eBay。除了創(chuàng)建實業(yè)公司外，Thiel還是知名的投資人，F(xiàn)acebook、LinkedIn、Yelp等知名創(chuàng)業(yè)公司都是他參與投資的。2004年，Thiel為Facebook提供了50萬美元的啟動資金，而這項投資給他帶來2萬倍的收益。

Palantir公司的名字是Thiel取的，來源于《指環(huán)王》中的Palantiri(諧音Palantir)。《指環(huán)王》中，Palantiri是一個可以穿越時空、看到一切、建立各種聯(lián)系的水晶球，這暗喻著Palantir公司的業(yè)務。

Palantir的另一位創(chuàng)始人是Joe Lonsdale，他是Thiel的學徒和投資伙伴。事實上，Lonsdale 有一個更知名、更吸引人的身份——Lady Gaga在全球社交媒體資產的掌控者。

Alex Karp是Palantir公司的聯(lián)席創(chuàng)始人兼CEO。他的背景頗為有趣，富三代、法學博士、新古典社會理論博士、硅谷知名投資人，都是他的標簽。

關于Palantir——發(fā)現(xiàn)麥道夫“龐氏騙局”、協(xié)助CIA和FBI防恐，翻出本拉登

Palantir最傳奇的戰(zhàn)績之一是發(fā)現(xiàn)麥道夫“龐氏騙局”。美國證監(jiān)會旗下某組織曾爆料稱，他們使用Palantir的軟件，整合了40年的記錄及海量數(shù)據(jù)，在進行復雜的大數(shù)據(jù)分析之后，發(fā)現(xiàn)了納斯達克前主席麥道夫(Bernie Madoff)的“龐氏騙局”。Palantir幫助多家銀行追回了麥道夫隱藏起來的數(shù)十億美元巨款。

此外，Palantir在追蹤、抓住并擊斃基地組織頭目本拉登(Osama bin Laden)的行動中，也立上了大功。

這一篇文章比較生動地介紹了Palantir如何通過技術協(xié)助客戶作業(yè)的，也是我看到過的講大數(shù)據(jù)故事最精彩的一篇。

像CIA(美國中情局)或FBI(美國聯(lián)邦調查局)這樣的組織擁有成千上萬的不同的數(shù)據(jù)庫、財政記錄、DNA樣本、聲音樣本、視頻剪輯、地圖、平面圖、來自世界各地的人的情報報告。即使他們都是同一個系統(tǒng)的，也很難處理這些不同類型的數(shù)據(jù)——比方說，電子表格上的銷售記錄，還有視頻監(jiān)控圖像。Palantir讓人們能更簡單對大型數(shù)據(jù)集進行挖掘。它通過搜索所有可用的數(shù)據(jù)庫，識別有關聯(lián)的信息，然后將它們放在一個地方。

去年10月份的時候，一個名叫Mike Fikri的外國人買了一張從開羅飛往邁阿密的單程機票，并在當?shù)刈饬艘婚g公寓。在過去的幾周里，他從一家俄羅斯銀行賬戶中提取了大量現(xiàn)金，并且給在敘利亞的某幾個人打了好幾個電話。最近，他租了一輛卡車，開去了奧蘭多，還自己去了迪士尼樂園。眾多的監(jiān)控理想顯示，他在這個世界上最快樂的地方并沒有進行玩樂。他一整天都在對擁擠的廣場和大門等地方拍照。

Fikri的個人行為不會引起懷疑。有許多人都會租卡車或者在敘利亞有人際關系，毫無疑問，也有很多無害的怪人著迷于游樂園設施。總之，盡管他們認為Fikri在搞些名堂。其實，如果是4年前，他攻擊前的準備工作將不會有人注意到。CIA的分析員也許會標記這個人的機票購買;FBI特工也許會查看這個人的銀行轉賬。但沒辦法將兩者聯(lián)系起來。反恐特工是幸運的，更不用說在奧蘭多的游客了，政府現(xiàn)在已經(jīng)使用了Palantir Technologies(Palantir技術公司)的軟件，它是一家硅谷公司，已經(jīng)成為了情報和執(zhí)法部門的寵兒。

Fikri開車去奧蘭多的那天，他被開了一張超速罰單，觸發(fā)了CIA 的Palantir系統(tǒng)的警報。一位分析員將Fikri的名字輸入搜索欄，就會彈出一個信息窗口，包含了從政府的每個數(shù)據(jù)庫中提取出來的大量相關信息。有CIA特工在開羅采集的Fikri的指紋和DNA樣本;有他前往邁阿密的ATM(自動提款機)的視頻;有收費站拍的他租來的卡車的車牌照片;有通話記錄;有全球精確定位他的移動軌跡。然后，所有的信息都將顯示在一個清晰設計的圖形界面中，看起來就像Tom Cruise在碟中諜中用的那些。

當CIA分析員開始翻看Palantir中有關Fikri的檔案時，故事就開始了。單擊鼠標顯示出Fikri匯款給他曾經(jīng)電話過的在敘利亞的人。再次單機鼠標，出現(xiàn)了CIA的有關敘利亞人的外勤報告，揭露了這些敘利亞人曾因行為可疑，和他們在過去的兩周內每天都有碰面而受到調查。單擊：這些敘利亞人在Fikri給他們匯款后的第二天，買了去邁阿密的機票。為了輔助哪怕是最遲鈍的分析員，這款軟件展示了一張地圖，上面用脈沖紅光追蹤了從開羅和敘利亞一直到Fikri的邁阿密公寓的資金流動。在Fikri襲擊前，這給當?shù)鼐焯峁┝宿D移潛在受害人所需的最新信息。

再次重復，這些描述是我見過的最精彩的描述大數(shù)據(jù)的場景的故事。

帶著對這些故事的憧憬，近期，我在帕拉奧圖呆了一段時間，著意和一些Stanford出來的華人工程師交流了解這家公司，有些粗淺的認識，讓之前的神秘少了幾分。

1，palantir的業(yè)務發(fā)展速度確實很快，除之前拿下的部分政府的項目外，最近獲得不少金融行業(yè)的項目，也是很多硅谷優(yōu)秀工程師的首選對象。但是政府項目的規(guī)模比外界傳的要小很多，尤其是中國報道的內容讓硅谷的人看了有些意外。

2，palantir的主要能力是特定業(yè)務場景下的數(shù)據(jù)分析能力，尤其是對海量復雜數(shù)據(jù)的快速處：分類、聚合、可視化，模型能力，同時需要對特定行業(yè)領域非常熟悉的業(yè)務專家，最好是數(shù)據(jù)科學家，這個挑戰(zhàn)甚至難過對數(shù)據(jù)的處理。palantir在這個領域做的比較優(yōu)秀的地方是兩個;首先選擇非常有挑戰(zhàn)性的客戶業(yè)務場景，是客戶比較頭痛的業(yè)務難題，問題的解決可以非常大幅度降低在傳統(tǒng)信息技術的基礎設施的投資，縮短問題處理周期，當然付高價格就不是問題。其次，挑選最秀的的硅谷分析師和數(shù)據(jù)科學家，業(yè)務領域的專家，付高于硅谷平均水準工資，加上未上市的股票誘惑，人才保證了項目的交付速度和質量。一句話：高舉高打。當然創(chuàng)始人創(chuàng)造的獨特的項目交付管理方法對項目的交付效率比較ibm等公司要更迅速和敏捷。

3，目前這種主要基于咨詢和技術服務的業(yè)務模式，也消耗了大量的人力資源，內部加班的情況非常多，人員招聘的難度也不斷增長，尤其是他們的業(yè)務在政府項目領域非常少用華人和外籍人，也有部分工程師人呆一段時間神秘感消失就離開的，這種業(yè)務模式本身并不是特別給看好，如果不是創(chuàng)始人神一樣的感召力，一般企業(yè)不可能做到目前的這個市場價值的。

結合國內行業(yè)情況，對我們自己的發(fā)展定位，有了更清晰的認識

1，堅持聚焦自己的業(yè)務領域：客戶選擇很重要，挑戰(zhàn)性的項目保證吸引優(yōu)秀人才的第一條件。當然，大家都會這么想，做的時候就需要決心和投入。

2，改變項目交付管理辦法，圍繞客戶的核心問題，先忘掉技術本身，探索型的項目就要敢于突破和嘗試，對用戶業(yè)務需要深入洞察。

3，團隊協(xié)助：珍惜團隊核心資源的有效利用，知識分享和不斷總結和學習，做到項目敏捷交付。

4，人才儲備和培訓，充分利用各種有效途徑從高校吸引適合我們文化的潛質學生，利用項目和實驗室加快學習和動手能力。

5，忘掉大數(shù)據(jù)，忘掉palantir。眼睛盯著客戶，耳朵聆聽客戶，僅僅圍繞客戶的業(yè)務提供快速的有效的數(shù)據(jù)分析，通過可視化靈活展示業(yè)務狀況，把技術的問題拿回家研究。

另外，在北卡期間，我拜訪了另外一家比較老牌的高級商業(yè)分析領域的領導者——SAS公司，和SAS公司的華人高管做了交流和溝通，也看到一些變化：

1，SAS推出了全新架構的產品vaya，以適應新的數(shù)據(jù)環(huán)境比如內存計算性能要求等，并高度重視可視化部分，這點和Palantir都是一樣的，非常注重分析結果在客戶決策中的直接應用。

2，把機器學習在產品中的應用提高到新的高度。

當創(chuàng)始人Jim Goodnight看到Google阿爾法狗戰(zhàn)勝棋王時，寫了一份郵件給高管：

we are leaving behind!!!，三個嘆號說明對這個骨灰級的數(shù)據(jù)分析起家的創(chuàng)始人嚴重關切這些新技術的應用，我們自己的產品研發(fā)過程中需要非常認真對待機器學習技術的應用。數(shù)據(jù)技術的應用環(huán)境可能比我們想象的變化要快，我們要處理的數(shù)據(jù)量和復雜性增速會倒逼我們的效率必須更高。

來源：索信達數(shù)據(jù)

收藏分享

聲明：數(shù)據(jù)猿尊重媒體行業(yè)規(guī)范，相關內容都會注明來源與作者；轉載我們原創(chuàng)內容時，也請務必注明“來源：數(shù)據(jù)猿”與作者名稱，否則將會受到數(shù)據(jù)猿追責。