【金猿技術(shù)展】SSNG多源數(shù)據(jù)處理技術(shù)——運(yùn)營商手機(jī)信令處理系統(tǒng)及平臺
原創(chuàng) 聯(lián)通智慧足跡 | 2022-01-04 22:04
【數(shù)據(jù)猿導(dǎo)讀】 中國聯(lián)通智慧足跡開發(fā)的SSNG多源數(shù)據(jù)處理平臺,是完全自研的新一代面向行為集成的位置數(shù)據(jù)處理系統(tǒng)。

中國聯(lián)通智慧足跡開發(fā)的SSNG多源數(shù)據(jù)處理平臺,是完全自研的新一代面向行為集成的位置數(shù)據(jù)處理系統(tǒng)。平臺沉淀海量信令處理過程中的長期經(jīng)驗(yàn),著力解決影響數(shù)據(jù)輸出質(zhì)量的核心堵點(diǎn),可兼容類似信令的多種LBS數(shù)據(jù)源接入并實(shí)現(xiàn)自動化、標(biāo)準(zhǔn)化輸出數(shù)據(jù)結(jié)果。
技術(shù)說明
SSNG多源數(shù)據(jù)處理平臺技術(shù)創(chuàng)新部分包括:
行為矩陣:將離散的駐留信息,轉(zhuǎn)化為用戶的時空矩陣,通過機(jī)器學(xué)習(xí)模式識別,提取出用戶的LBS行為特征。
行為集成:將用戶的行為矩陣,結(jié)合搜集沉淀的土地利用&地物POI數(shù)據(jù),為用戶的駐留、出行信息賦予具體的目的,便于后續(xù)的場景化分析。
人車匹配:結(jié)合車聯(lián)網(wǎng)LBS數(shù)據(jù),將軌跡重合度高的“人-車”用戶對,通過軌跡伴隨算法識別出來,可用于判斷用戶的車輛保有情況。
路徑擬合:解決信令數(shù)據(jù)定位不連續(xù)和受限基站布設(shè)密度等問題,引入路網(wǎng)拓?fù)鋽?shù)據(jù),將用戶出行鏈還原至真實(shí)道路上,并確定流向及關(guān)鍵轉(zhuǎn)折點(diǎn),以便于判斷出行方式。
出行洞察:利用信令數(shù)據(jù)、基站數(shù)據(jù),匹配地鐵網(wǎng)絡(luò)、高鐵網(wǎng)絡(luò),通過機(jī)器學(xué)習(xí)算法,判定用戶出行時使用的出行方式。
基于SSNG多源數(shù)據(jù)處理平臺,可實(shí)現(xiàn)的技術(shù)突破包括:
1)全國長時序人口流動監(jiān)測技術(shù)
針對運(yùn)營商信令數(shù)據(jù)以及spark分布式計(jì)算平臺的特點(diǎn),獨(dú)創(chuàng)了處理運(yùn)營商信令數(shù)據(jù)的雙層計(jì)算框架,填補(bǔ)了分布式機(jī)器學(xué)習(xí)方法處理運(yùn)營商信令數(shù)據(jù)的空白,實(shí)現(xiàn)了大規(guī)模高效治理運(yùn)營商大數(shù)據(jù)的愿景;研發(fā)了人口流動與現(xiàn)代大數(shù)據(jù)技術(shù)相結(jié)合的宏觀監(jiān)測仿真模型。
基于以上技術(shù)構(gòu)建了就業(yè)、交通、疫情、春運(yùn)等一系列場景模型,并開發(fā)了響應(yīng)決策平臺,實(shí)現(xiàn)了對我國人口就業(yè)、流動及疫情影響的全域?qū)崟r監(jiān)測。
2)全國長時序人口流動預(yù)測技術(shù)
即人口流動的大尺度OD預(yù)測技術(shù),研發(fā)了人口跨區(qū)域流動OD預(yù)測模型,解決了信令大數(shù)據(jù)在量化模擬大尺度人口流動中的技術(shù)難題,形成了對全國人口流動在日、周、月不同時間段和社區(qū)、鄉(xiāng)鎮(zhèn)、縣市不同地理尺度進(jìn)行預(yù)測的先進(jìn)技術(shù),實(shí)現(xiàn)了2020年新冠疫情后全國返城返崗和2021年全國春節(jié)期間人口流動的高精度預(yù)測。
3)實(shí)時人口監(jiān)測
實(shí)時人口監(jiān)測是通過對用戶手機(jī)信令進(jìn)行實(shí)時處理、計(jì)算和分析,得出指定區(qū)域的實(shí)時人口數(shù)量、特征和遷徙情況。包括區(qū)域人口密度、人口數(shù)量、人口結(jié)構(gòu)、人口來源、人口畫像、人口遷徙、職住分析、人口預(yù)測等信息。
4)超強(qiáng)數(shù)據(jù)處理及AI能力
引入Bitmap大數(shù)據(jù)處理算法及Pilosa數(shù)據(jù)庫集群,采用實(shí)時流式計(jì)算,集成Kafka、redis、RabbitMQ等分布式大數(shù)據(jù)處理組件,搭建自有信令大數(shù)據(jù)處理平臺,使用百億計(jì)算go-kite架構(gòu),實(shí)現(xiàn)毫秒級響應(yīng),實(shí)時批量處理數(shù)據(jù)達(dá)500000條 /秒,每天可處理1000億條數(shù)據(jù)。集成AI分析能力(A/B軌),有效避免了運(yùn)營商數(shù)據(jù)采集及傳輸過程中的時延及中斷情況,大幅提高數(shù)據(jù)結(jié)果的實(shí)時性。
已獲專利情況:
專利名稱 專利號
出行統(tǒng)計(jì)方法、裝置、計(jì)算機(jī)設(shè)備和可讀存儲介質(zhì) ZL 2020 1 0908424.3
信令數(shù)據(jù)匹配方法、裝置及電子設(shè)備 ZL 2019 1 1298869.8
軌道交通用戶識別方法和裝置 ZL 2019 1 0755903.3
公共聚集事件識別方法、裝置、計(jì)算機(jī)設(shè)備及存儲介質(zhì) ZL 2020 1 1191917.6
廣域高鐵基站識別方法、裝置、服務(wù)器及存儲介質(zhì) ZL 2020 1 1325543.2
相關(guān)榮譽(yù):
2021地理信息科技進(jìn)步獎一等獎、中國測繪學(xué)會科技進(jìn)步獎特等獎、2021數(shù)博會領(lǐng)先科技成果獎、兼容系統(tǒng)創(chuàng)新應(yīng)用大賽大數(shù)據(jù)專項(xiàng)賽優(yōu)秀獎。
開發(fā)團(tuán)隊(duì)
·帶隊(duì)負(fù)責(zé)人:陶周天
公司CTO,北京大學(xué)理學(xué)學(xué)士。長期任職于微軟等世界500強(qiáng)企業(yè),曾任上市公司優(yōu)炫軟件VP,具備豐富的IT架構(gòu)、數(shù)據(jù)安全、數(shù)據(jù)分析建模、機(jī)器學(xué)習(xí)、項(xiàng)目管理經(jīng)驗(yàn)。牽頭組織突破多個技術(shù)難題(人地匹配、人車匹配、室內(nèi)基站優(yōu)化、行為集成AI等),研發(fā)一系列技術(shù)專利。
·團(tuán)隊(duì)其他重要成員:劉祖軍
高級算法工程師,美國愛荷華大學(xué)計(jì)算機(jī)科學(xué)本碩,曾任職于美國俄亥俄州立大學(xué)研究院。
·隸屬機(jī)構(gòu):智慧足跡
智慧足跡數(shù)據(jù)科技有限公司是中國聯(lián)通控股,京東科技參股的專業(yè)大數(shù)據(jù)及智能科技公司。公司依托中國聯(lián)通卓越的數(shù)據(jù)資源和5G能力,京東科技強(qiáng)大的人工智能、物聯(lián)網(wǎng)等技術(shù)和“產(chǎn)業(yè)X科技”能力,聚焦“人口+”大數(shù)據(jù),連接人-物-企,成為全域數(shù)據(jù)智能科技領(lǐng)先服務(wù)商。
公司以P·A·Dt為核心能力,面向數(shù)字政府、智慧城市、企業(yè)數(shù)字化轉(zhuǎn)型廣大市場主體,專注經(jīng)濟(jì)治理、社會治理和企業(yè)數(shù)字化服務(wù),構(gòu)建“人口+”七大多源數(shù)據(jù)主題庫,提供“人口+” 就業(yè)、經(jīng)濟(jì)、消費(fèi)、民生、城市、企業(yè)等大數(shù)據(jù)產(chǎn)品平臺,服務(wù)支撐國家治理現(xiàn)代化和國家戰(zhàn)略,推動經(jīng)濟(jì)社會發(fā)展。
目前,公司已服務(wù)國家二十多個部委及眾多省市政府、300+城市規(guī)劃、知名企業(yè)和高校等智庫、國有及股份制銀行等數(shù)百家頭部客戶,已建成全球最強(qiáng)大的手機(jī)信令處理平臺,是中國就業(yè)、城規(guī)、統(tǒng)計(jì)等領(lǐng)域大數(shù)據(jù)領(lǐng)先服務(wù)商。
相關(guān)評價
新一代SSNG多源大數(shù)據(jù)處理平臺,提升了手機(jī)信令數(shù)據(jù)在空間數(shù)據(jù)計(jì)算的精度,信令處理結(jié)果對室內(nèi)場景更具敏銳性,在區(qū)域范圍的職住人群空間分布更加接近實(shí)際情況。
——某央企大數(shù)據(jù)部技術(shù)負(fù)責(zé)人
新一代SSNG多源大數(shù)據(jù)處理平臺,可處理實(shí)時及歷史信令數(shù)據(jù),應(yīng)對不同客戶應(yīng)用場景。并且根據(jù)長時間序列歷史數(shù)據(jù)實(shí)現(xiàn)人口預(yù)測,為提高數(shù)據(jù)精度可對接室內(nèi)基站數(shù)據(jù),從而提供更加準(zhǔn)確的人員定位。
——某企業(yè)政府事業(yè)部總監(jiān)
來源:數(shù)據(jù)猿
刷新相關(guān)文章
我要評論
活動推薦more >
- 【大會嘉賓】威馬汽車集團(tuán)戰(zhàn)2021-08-02
- 【大會嘉賓】聯(lián)通智慧足跡CM2021-08-02
- 2018 上海國際大數(shù)據(jù)產(chǎn)業(yè)高2018-12-03
- 2018上海國際計(jì)算機(jī)網(wǎng)絡(luò)及信2018-12-03
- 中國國際信息通信展覽會將于2018-09-26
- 第五屆FEA消費(fèi)金融國際峰會62018-06-21
不容錯過的資訊
-
1從AI應(yīng)用的五大要素看,AI產(chǎn)業(yè)存在哪些機(jī)
-
2盛況空前| 2021浦江環(huán)境可持續(xù)發(fā)展論壇
-
3【金猿產(chǎn)品展】元年云——成長型企業(yè)數(shù)字
-
4【金猿案例展】福建郵政儲蓄銀行——信用
-
52021費(fèi)控報銷領(lǐng)域最具商業(yè)合作價值企業(yè)盤
-
6美創(chuàng)數(shù)創(chuàng)平臺 數(shù)字化轉(zhuǎn)型 美創(chuàng)科技
-
7【金猿人物展】南京新百CIO:在數(shù)據(jù)安全
-
8【金猿產(chǎn)品展】UWB&藍(lán)牙AOA融合定位系統(tǒng)
-
9【金猿產(chǎn)品展】Kyligence智能數(shù)據(jù)云——
-
10【金猿案例展】搜狐暢游——《小浣熊百將