云數(shù)據(jù)平臺(tái)CyberMeta是一站式大數(shù)據(jù)智能研發(fā)與治理平臺(tái)，集成了數(shù)據(jù)集成、數(shù)據(jù)開發(fā)、生產(chǎn)運(yùn)維、實(shí)時(shí)分析、資產(chǎn)管理、數(shù)據(jù)質(zhì)量、數(shù)據(jù)安全、數(shù)據(jù)共享等核心數(shù)據(jù)工藝，讓數(shù)據(jù)從采集到展現(xiàn)、從分析到驅(qū)動(dòng)應(yīng)用實(shí)現(xiàn)一站式平臺(tái)服務(wù)。產(chǎn)品致力于為企業(yè)解決多業(yè)務(wù)場(chǎng)景、多業(yè)務(wù)系統(tǒng)下的數(shù)據(jù)共享、資產(chǎn)管理等難題，幫助企業(yè)提升數(shù)據(jù)工作者工作效率和降低數(shù)據(jù)運(yùn)維管理成本，挖掘數(shù)據(jù)價(jià)值，為企業(yè)決策提供數(shù)據(jù)支撐。

2022年重大更新升級(jí)

云數(shù)據(jù)平臺(tái)CyberMeta在2022年主要做出了以下方面的革新調(diào)整：

具備多租戶、彈性擴(kuò)展、計(jì)算存儲(chǔ)分離等特性，擁有一站式一體化的服務(wù)能力。

支持多元異構(gòu)大數(shù)據(jù)引擎靈活可插拔，支持流批一體、湖倉一體的技術(shù)解決方案。

產(chǎn)品提供開源和開放，通過OPENAPI方式可以快速和第三方產(chǎn)品進(jìn)行集成。

數(shù)據(jù)集成支持非結(jié)構(gòu)化數(shù)據(jù)源FTP、SFTP、HDFS等多種數(shù)據(jù)源的數(shù)據(jù)讀取和寫入。

提供實(shí)時(shí)計(jì)算能力，實(shí)現(xiàn)Flink作業(yè)開發(fā)。通過Flink SQL、Flink Jar 作業(yè)實(shí)現(xiàn)不同存儲(chǔ)系統(tǒng)之間的ETL處理等。提供在線調(diào)試、查看運(yùn)行日志、語法校驗(yàn)、版本管理等功能。

數(shù)據(jù)開發(fā)支持Flink、Spark、MR等多種計(jì)算引擎，支持在平臺(tái)上進(jìn)行各類引擎任務(wù)的開發(fā)、測(cè)試、發(fā)布和運(yùn)維等操作。

支持對(duì)多套環(huán)境進(jìn)行任務(wù)發(fā)布和管理，實(shí)現(xiàn)一套代碼多環(huán)境部署的目的。

數(shù)據(jù)地圖模塊實(shí)現(xiàn)以數(shù)據(jù)搜索為基礎(chǔ)，提供表詳情、數(shù)據(jù)類目、數(shù)據(jù)血緣、元數(shù)據(jù)采集等功能。

數(shù)據(jù)服務(wù)提供加工、融合后的數(shù)據(jù)表快速生成API，支持API在線測(cè)試、授權(quán)、調(diào)用等，同時(shí)支持注冊(cè)現(xiàn)有API至數(shù)據(jù)服務(wù)模塊，進(jìn)行API的統(tǒng)一管理與發(fā)布。

應(yīng)用場(chǎng)景/人群

產(chǎn)品應(yīng)用場(chǎng)景：

1、數(shù)據(jù)中臺(tái)建設(shè)全流程：集成-開發(fā)-數(shù)據(jù)服務(wù)，一站式完成，幫助企業(yè)建立完善的信息化解決方案，支撐公司業(yè)務(wù)發(fā)展、規(guī)范作業(yè)流程。

2、大數(shù)據(jù)計(jì)算及分析：利用集群及強(qiáng)大的計(jì)算引擎，完成海量數(shù)據(jù)分析。

3、數(shù)據(jù)匯聚：通過數(shù)據(jù)平臺(tái)，打破數(shù)據(jù)孤島，將不同系統(tǒng)之間的數(shù)據(jù)相互打通，實(shí)現(xiàn)數(shù)據(jù)自由離線或?qū)崟r(shí)流動(dòng)，提供復(fù)雜網(wǎng)絡(luò)環(huán)境下、豐富的異構(gòu)數(shù)據(jù)源之間高速穩(wěn)定的數(shù)據(jù)移動(dòng)能力，構(gòu)建企業(yè)全域數(shù)據(jù)資產(chǎn)中心，釋放數(shù)據(jù)價(jià)值。

4、數(shù)據(jù)全生命周期治理：提供系統(tǒng)化工具保障數(shù)據(jù)治理工作的落地和開展，制定數(shù)據(jù)標(biāo)準(zhǔn)，完善管理體現(xiàn)，規(guī)范監(jiān)控流程，建立企業(yè)統(tǒng)一數(shù)據(jù)門戶，保證數(shù)據(jù)能夠精準(zhǔn)、安全的提供給用戶和系統(tǒng)。

客戶內(nèi)部使用人群：

1、從事數(shù)據(jù)開發(fā)、算法開發(fā)等崗位的技術(shù)人員。

2、從事數(shù)據(jù)應(yīng)用開發(fā)的開發(fā)人員。

3、把控公司核心數(shù)據(jù)資產(chǎn)的管理人員。

產(chǎn)品功能

數(shù)據(jù)集成：

提供可跨異構(gòu)數(shù)據(jù)存儲(chǔ)系統(tǒng)能力、可靠、安全、低成本、可彈性擴(kuò)展的數(shù)據(jù)同步平臺(tái)，通過可視化向?qū)Ｊ胶湍_本模式等多種方式與企業(yè)系統(tǒng)集成。

1、支持db/nosql/半結(jié)構(gòu)化/二進(jìn)制等主流格式；

2、支持多類數(shù)據(jù)源，多對(duì)數(shù)據(jù)傳輸模式；

3、開放式插件式架構(gòu)，新增數(shù)據(jù)源類型支持只需幾天。

數(shù)據(jù)開發(fā)：

提供可視化一站式離線任務(wù)和實(shí)時(shí)任務(wù)開發(fā)功能，集成主流計(jì)算引擎和針對(duì)各種業(yè)務(wù)場(chǎng)景的存儲(chǔ)引擎，通過拖拉拽的方式輕松完成數(shù)據(jù)處理分析流程。

數(shù)據(jù)質(zhì)量管理：

統(tǒng)一的數(shù)據(jù)標(biāo)準(zhǔn)，支持多種異構(gòu)數(shù)據(jù)源的質(zhì)量校驗(yàn)、通知及管理服務(wù)的一站式平臺(tái)，為用戶提供全鏈路的數(shù)據(jù)治理方案，包括數(shù)據(jù)探查、對(duì)比、治理監(jiān)控、SQL掃描和智能報(bào)警等功能。

2022年新增的產(chǎn)品功能：

數(shù)據(jù)開發(fā)：實(shí)時(shí)任務(wù)開發(fā)功能。

數(shù)據(jù)服務(wù)：

提供一站式API托管服務(wù)，實(shí)現(xiàn)數(shù)據(jù)服務(wù)API 的創(chuàng)建、維護(hù)、發(fā)布、監(jiān)控等全生命周期的管理。支持?jǐn)?shù)據(jù) API 服務(wù)的發(fā)布和下線，支持 API 發(fā)布版本管理。

數(shù)據(jù)資產(chǎn)：

以數(shù)據(jù)搜索為基礎(chǔ)，提供表詳情、資產(chǎn)類目、資產(chǎn)盤點(diǎn)、數(shù)據(jù)血緣、元數(shù)據(jù)采集等工具，實(shí)現(xiàn)對(duì)數(shù)據(jù)的統(tǒng)一管理和血緣的跟蹤。

統(tǒng)一調(diào)度系統(tǒng)：（2022年改造升級(jí)）

提供全面托管的調(diào)度服務(wù)，包括任務(wù)調(diào)度配置、任務(wù)調(diào)度運(yùn)行、資源控制、調(diào)度策略、調(diào)度監(jiān)控等。

1、支持最小到分鐘級(jí)調(diào)度，支持任務(wù)即時(shí)實(shí)例化，無需T+1等待；

2、支持多元異構(gòu)集群統(tǒng)一調(diào)度，支持跨云、跨中心、跨集群、跨系統(tǒng)調(diào)度；

3、全面的運(yùn)行監(jiān)控和預(yù)警。

產(chǎn)品優(yōu)勢(shì)

1、簡(jiǎn)單、易用、低門檻：集成大數(shù)據(jù)核心組件，通過可視化開發(fā)界面，高效的完成大數(shù)據(jù)開發(fā)，快速讓企業(yè)擁有大數(shù)據(jù)能力，支持多人協(xié)同開發(fā)，提升工作效率。

2、開源底座、混合云：整合高性能、穩(wěn)定版本的開源存儲(chǔ)及計(jì)算大數(shù)據(jù)組件，全國首個(gè)開源完整的數(shù)據(jù)平臺(tái)OS，支持在各大云平臺(tái)上部署使用。

3、一體化、全棧式：提供數(shù)據(jù)采集、標(biāo)注、清洗、加工等一站式數(shù)據(jù)服務(wù)，覆蓋整個(gè)數(shù)據(jù)生命周期，全鏈路管理。

4、安全性、自主性：支持私有化部署及混合部署，保障數(shù)據(jù)的自主權(quán)。同時(shí)支持?jǐn)?shù)據(jù)權(quán)限控制、數(shù)據(jù)脫敏、 實(shí)時(shí)審計(jì)、高危風(fēng)險(xiǎn)告警，確保數(shù)據(jù)的安全。

與行業(yè)中其他友商對(duì)比的優(yōu)勢(shì)：

1、集成多種大數(shù)據(jù)和AI引擎，實(shí)現(xiàn)數(shù)智一體化（湖倉一體，流批一體，數(shù)智一體）。

2、先進(jìn)的現(xiàn)代化數(shù)智平臺(tái)架構(gòu)，云化、云原生化和實(shí)時(shí)化。

3、開源、開放 ，開源的云數(shù)據(jù)平臺(tái)，并且完全開放系統(tǒng)API給生態(tài)伙伴。

4、支持平臺(tái)能力與大數(shù)據(jù)組件分離，實(shí)現(xiàn)輕量化部署，與客戶原有大數(shù)據(jù)組件無縫銜接。

5、支持多地域、多環(huán)境、多集群發(fā)布能力。

服務(wù)客戶/使用人數(shù)

重要代表性客戶：某大型國有能源公司

通過調(diào)研客戶業(yè)務(wù)流程，發(fā)現(xiàn)實(shí)時(shí)開發(fā)能力有限、平臺(tái)自動(dòng)化程度低、資產(chǎn)管理與使用效率低等問題。為解決客戶在業(yè)務(wù)中存在的問題，我們一方面提供實(shí)時(shí)開發(fā)平臺(tái)，通過“Flink+Kafka”技術(shù)實(shí)現(xiàn)實(shí)時(shí)的數(shù)據(jù)采集和數(shù)據(jù)處理能力，并支持異構(gòu)數(shù)據(jù)源讀寫、自動(dòng)構(gòu)建血緣關(guān)系等功能，另一方面提供統(tǒng)一的數(shù)據(jù)資產(chǎn)管理平臺(tái)，通過元數(shù)據(jù)采集對(duì)資產(chǎn)進(jìn)行統(tǒng)一的管理，形成數(shù)據(jù)資產(chǎn)。通過對(duì)數(shù)據(jù)平臺(tái)的全面升級(jí)，使得客戶在物探、鉆井、測(cè)井等13項(xiàng)勘探開發(fā)業(yè)務(wù)和計(jì)劃、財(cái)務(wù)、物資等11項(xiàng)行政經(jīng)營業(yè)務(wù)的數(shù)據(jù)及時(shí)性由87%提升至96%，極大程度提高了各部門的工作效率。

總的產(chǎn)品適用客戶量或人群數(shù)量：

CyberMeta適用絕大多數(shù)的企業(yè)，覆蓋金融、政府、能源、教育、制造業(yè)、零售等多個(gè)行業(yè)。2022年主要客戶有20個(gè)，大部分為世界500強(qiáng)企業(yè)，產(chǎn)品適用人群數(shù)量覆蓋26000人左右。

市場(chǎng)價(jià)值

云數(shù)據(jù)平臺(tái)CyberMeta產(chǎn)品的市場(chǎng)價(jià)值：

1、支撐企業(yè)的數(shù)字化轉(zhuǎn)型：幫助企業(yè)快速構(gòu)建端到端的數(shù)據(jù)平臺(tái)，消除數(shù)據(jù)孤島，統(tǒng)一數(shù)據(jù)標(biāo)準(zhǔn)，形成統(tǒng)一的數(shù)據(jù)資產(chǎn)，發(fā)揮數(shù)據(jù)價(jià)值，加快數(shù)據(jù)變現(xiàn)，促進(jìn)數(shù)字化轉(zhuǎn)型。

2、推動(dòng)企業(yè)的創(chuàng)新：數(shù)據(jù)平臺(tái)使企業(yè)的數(shù)據(jù)具備快速編排、組合服務(wù)的能力，實(shí)現(xiàn)數(shù)據(jù)高效共享，提升數(shù)據(jù)的獲取和服務(wù)效率，讓數(shù)據(jù)快速有效就緒，可以更好地支持企業(yè)規(guī)?；瘎?chuàng)新，降低試錯(cuò)成本，使企業(yè)自身能力與用戶的需求可以持續(xù)對(duì)接。

3、提高企業(yè)效能：企業(yè)通過抽象、梳理、整合可復(fù)用的功能和場(chǎng)景，將其提煉為可被業(yè)務(wù)單元引用的基礎(chǔ)能力并下沉，避免重復(fù)造輪子，實(shí)現(xiàn)服務(wù)快速復(fù)用。打破新舊業(yè)務(wù)的數(shù)據(jù)壁壘，解決求穩(wěn)與求變的矛盾，同時(shí)減少人員與部門間的溝通成本，提升企業(yè)整體運(yùn)營和創(chuàng)新效能。

產(chǎn)品所屬企業(yè)·：數(shù)新網(wǎng)絡(luò)

數(shù)新網(wǎng)絡(luò)，全稱浙江數(shù)新網(wǎng)絡(luò)有限公司，2020年7月成立，總部位于杭州。公司創(chuàng)始人陳廷梁（花名：王賁）是原阿里云大數(shù)據(jù)平臺(tái)研發(fā)總監(jiān)，御膳房、DataWorks平臺(tái)創(chuàng)始人，數(shù)加平臺(tái)總負(fù)責(zé)人。數(shù)新作為一家擁抱開源，專注于云數(shù)據(jù)平臺(tái)的大數(shù)據(jù)服務(wù)商，致力于打造國內(nèi)領(lǐng)先的云數(shù)智操作系統(tǒng)。通過公司自主研發(fā)的DataCyber產(chǎn)品序列，包括云數(shù)據(jù)平臺(tái)CyberMeta，云數(shù)據(jù)科學(xué)平臺(tái)CyberScience，數(shù)據(jù)運(yùn)維平臺(tái)CyberOPS，數(shù)據(jù)分析平臺(tái)CyberExcel，可提供數(shù)據(jù)匯聚到數(shù)據(jù)服務(wù)、高效建模、智能運(yùn)維、智能分析的一站式服務(wù)，讓數(shù)據(jù)從采集到展現(xiàn)、從分析到驅(qū)動(dòng)應(yīng)用得到高質(zhì)量結(jié)合，整體提升企業(yè)競(jìng)爭(zhēng)力。

來源：數(shù)據(jù)猿