国产精品高潮呻吟久久AV无码,在线观看亚洲糸列,888奇米亚洲影视四色,中文字幕动漫精品第1页,国产大屁股视频免费区,半夜他强行挺进了我的体内,免费看国产曰批40分钟,国产女人片最新视频,要做AV在线播放,欧美韩日精品一区二区三区

大數(shù)據(jù)的煩惱：“近因偏差”怎么破？

大數(shù)據(jù) 近因偏差數(shù)據(jù)分析

BBC英倫網(wǎng) | 2016-06-23 10:23

【數(shù)據(jù)猿導(dǎo)讀】全世界90%的數(shù)據(jù)都是最近幾年生成的，人們對這個結(jié)論可能已經(jīng)耳熟能詳。盡管我能找到的這個說法的最早出處是在2013年5月，但是，這種趨勢卻始終未曾發(fā)生變化。事實上，過去30年間，每隔兩年，全球總數(shù)據(jù)量就會增長大約10倍——這讓計算機(jī)行業(yè)的摩爾定律相形見絀

信息爆炸所帶來的問題之一在于，即便和不久之前相比，當(dāng)前的信息量規(guī)模都會大到不可思議的程度。假如有一本信息影集代表了你從嬰兒到成年的前18年人生，并且照片數(shù)量的增長速度和全球數(shù)據(jù)量保持一致，如果頭兩年你只有兩張照片，那么從6歲到8歲的兩年間你就會有兩千張照片，從10歲到12歲有20萬張，從16歲到18歲則有驚人的2億張，這意味著在16-18歲期間你每秒鐘就會拍3張照片。

當(dāng)你回過頭去以更長遠(yuǎn)的眼光來看待事物時，你會發(fā)現(xiàn)，你有太多太多近期的的事件，而較早的數(shù)據(jù)和事件是那么的稀少。

當(dāng)然，全球數(shù)據(jù)不能這樣簡單類比。全球數(shù)據(jù)增長的主要原因在于更多的人口產(chǎn)生了更多信息源，以及更大的和更復(fù)雜詳細(xì)的信息結(jié)構(gòu)。然而，如果試圖回顧或分析與上文所述影集類似的歷史記錄，你會發(fā)現(xiàn)一個相同點，越遙遠(yuǎn)的歷史所留下的信息和記錄就會越稀少。怎么會發(fā)生這種事情呢?

這就是目前大數(shù)據(jù)采集分析中存在的一項弊端。無論你在哪一個時間點開始回顧歷史，都會遇到同一個麻煩：近期數(shù)據(jù)的數(shù)量遠(yuǎn)遠(yuǎn)超過遠(yuǎn)期歷史數(shù)據(jù)，由此，這個分析系統(tǒng)會過度重視短期趨勢而忽略長期趨勢，從而受到短視的困擾。

為了理解這個問題的重要性，需要考慮社會科學(xué)中有關(guān)“近因偏差”(recency bias，又稱近因效應(yīng))的研究發(fā)現(xiàn)。近因偏差是指：人們在判斷事物發(fā)展趨勢時，會認(rèn)為未來事件將會和近期體驗高度類似。這可以說是某種“可利用性法則”(availability heuristic)——不恰當(dāng)?shù)匾宰钊菀渍J(rèn)知的信息來作為思考的基礎(chǔ)。這還是一種普遍的心理學(xué)特征。

舉例來說，如果在你居住的地方，過去幾年的夏季氣溫都很低，那么你可能會認(rèn)為夏季氣候正在變得更冷——或者說你當(dāng)?shù)氐臍夂蛘谧兝洹５牵悴粦?yīng)該只根據(jù)少量數(shù)據(jù)分析長期趨勢。你需要有一個長遠(yuǎn)視角，才能認(rèn)識真正有意義的氣候趨勢。短時期內(nèi)，最好不進(jìn)行任何猜測。不過，我們之中又有誰能真正做到這點呢?

短期分析不僅不扎實、毫無益處，還會產(chǎn)生誤導(dǎo)

現(xiàn)實生活中大部分復(fù)雜事物的現(xiàn)象正是如此：股票市場、經(jīng)濟(jì)發(fā)展、企業(yè)的成功與失敗、戰(zhàn)爭與和平、國家關(guān)系、帝國的崛起和衰落等等。短期分析不僅不扎實、毫無益處，還會產(chǎn)生誤導(dǎo)。回頭看看，就在2009年全球金融危機(jī)襲來的時候，還有那么多經(jīng)濟(jì)學(xué)家信誓旦旦地宣稱這一事件不會發(fā)生。認(rèn)為根據(jù)那種短期時間尺度的數(shù)據(jù)就能做出扎實的預(yù)測，這種想法本身就有很大的問題。

我們還應(yīng)當(dāng)記住，在決定哪些數(shù)據(jù)該保存還是刪除的時候，新穎性往往會成為主要的考慮因素。舊的淘汰，新的進(jìn)來，在這個搜索算法本質(zhì)上偏向于新鮮事物的數(shù)字世界中，這是一個明顯的趨勢。從最高法院的裁決，到所有社交媒體服務(wù)平臺，我們到處都可以看到已經(jīng)失效的網(wǎng)址。我們身邊的幾乎所有技術(shù)都偏向于當(dāng)前信息，人也一樣：大多數(shù)人已經(jīng)習(xí)慣用個四五年就把原本光鮮亮麗的設(shè)備丟掉。

怎么辦?這個問題已經(jīng)不僅僅在于如何更好保存舊數(shù)據(jù)的范疇——盡管這并不是個壞主意，想想我們現(xiàn)在還有什么東西能流行保留10年之久。更重要的是，這個問題關(guān)系到確定哪些東西值得優(yōu)先保存，以及如何在知識的名義下，選擇哪些信息最有意義

或許我們需要的是我所稱之為的“智能性遺忘”：應(yīng)該讓我們的工具更多地放棄最近的信息，從而在長遠(yuǎn)視角上保持更高水平的連續(xù)性。這有點象是以數(shù)學(xué)方法重新整理一本影集。什么時候兩百萬張照片的價值比兩千張照片更低?什么時候較大的樣本量覆蓋范圍反而較小?哪些問題的重要性較低?哪個細(xì)節(jié)水平能提供有用的質(zhì)疑證據(jù)，而不是虛假的信心?

許多數(shù)據(jù)集是無法縮減的，只有在完整的情況下才最寶貴，比如，基因序列、人口統(tǒng)計學(xué)數(shù)據(jù)、地理和物理學(xué)的原始觀測數(shù)據(jù)等等。數(shù)據(jù)的科學(xué)性越弱，數(shù)據(jù)規(guī)模與數(shù)據(jù)的質(zhì)量就越可能呈現(xiàn)負(fù)相關(guān)，此時時間本身就成為更加重要的過濾工具。我們?nèi)绻蛔屑?xì)選擇過去保存下來的有價值、有意義的事物，它們就會被迅速膨脹的信息洪流悄無聲息地吞沒掉。

能否考察長期歷史遺留下來的數(shù)據(jù)取決于考察者是否有足夠的時間和注意力。今天的企業(yè)、個人和政府機(jī)構(gòu)都能夠獲得比以往(甚至就在幾年前)大許多數(shù)量級的數(shù)據(jù)，但是董事會成員、首席執(zhí)行官、政府官員等決策者卻沒有足夠時間和注意力來應(yīng)對這些數(shù)據(jù)。

今天的決策者們有越來越高效的工具幫助他們就所持有的數(shù)據(jù)提出問題——但你只應(yīng)該分析有意義的數(shù)據(jù)。單純的數(shù)量累積不是一個好的對策。在一個數(shù)據(jù)量越來越大的時代，如何選擇主動放棄哪些事情，與選擇做什么事情一樣重要。

來源：BBC英倫網(wǎng)

收藏分享

聲明：數(shù)據(jù)猿尊重媒體行業(yè)規(guī)范，相關(guān)內(nèi)容都會注明來源與作者；轉(zhuǎn)載我們原創(chuàng)內(nèi)容時，也請務(wù)必注明“來源：數(shù)據(jù)猿”與作者名稱，否則將會受到數(shù)據(jù)猿追責(zé)。