【金猿產(chǎn)品展】CKettle——通用組態(tài)式大數(shù)據(jù)交換平臺

金猿 CKettle 大數(shù)據(jù)交換平臺

原創(chuàng) 重慶通信建設(shè) | 2020-12-24 20:33

【數(shù)據(jù)猿導(dǎo)讀】本產(chǎn)品由重慶通信建設(shè)投遞并參與“數(shù)據(jù)猿年度金猿策劃活動——2020大數(shù)據(jù)產(chǎn)業(yè)創(chuàng)新服務(wù)產(chǎn)品榜單及獎項”評選。

【金猿產(chǎn)品展】CKettle——通用組態(tài)式大數(shù)據(jù)交換平臺

CKettle是一款跨平臺、高效、穩(wěn)定且易擴展的數(shù)據(jù)交換平臺，由中國通服工業(yè)互聯(lián)網(wǎng)（大數(shù)據(jù)）研究院在Kettle社區(qū)版的基礎(chǔ)上二次開發(fā)而來，是一套國產(chǎn)化、代碼可控的數(shù)據(jù)ETL方案，豐富的插件支持主動采集數(shù)據(jù)庫、互聯(lián)網(wǎng)、文件等各種來源的數(shù)據(jù)，也可通過發(fā)布Rest接口實時被動收集數(shù)據(jù)，支持豐富的數(shù)據(jù)清洗轉(zhuǎn)換方式和各種格式的數(shù)據(jù)輸出，插件商店支持在線搜索、查看、安裝與卸載，提供了流程式界面設(shè)計器，輕松方便的實現(xiàn)數(shù)據(jù)交換過程的定制。圍繞CKettle，團隊還打造了其專屬的全方位交流學(xué)習生態(tài)圈，擁有專職技術(shù)人員提供專業(yè)支持，具備論壇、Q群多渠道實時交流，具備文檔或視頻多方式生動教學(xué)。

上線短短幾月CKettle已通過了統(tǒng)信UOS、華為鯤鵬桌面云V8、中科方德高可信服務(wù)器操作系統(tǒng)V4.0及方德桌面操作系統(tǒng)V3.1等多方兼容性認證，在國產(chǎn)化的道路上穩(wěn)步前進，未來可期。

應(yīng)用場景/人群

面向人群：對數(shù)據(jù)清洗、數(shù)據(jù)轉(zhuǎn)換等數(shù)據(jù)處理操作有需求的個人或政企用戶。

應(yīng)用場景：個人用戶可應(yīng)用CKettle作為ETL工具輔助工作生活中的數(shù)據(jù)處理，幫助提升工作效率；政企用戶可依靠CKettle的定制開發(fā)搭建專屬數(shù)據(jù)處理平臺，提升全企工作效率，推動企業(yè)高速發(fā)展。

產(chǎn)品功能

CKettle擁有豐富的插件，提供Cassandra、ElasticSearch等新興大數(shù)據(jù)庫插件，提供郵件收發(fā)，SSH遠程控制，日志讀寫，數(shù)據(jù)流阻塞、追加、中止，數(shù)據(jù)倉庫，各類數(shù)據(jù)庫批量加載等基礎(chǔ)插件，支持主動采集數(shù)據(jù)庫、互聯(lián)網(wǎng)、文件等各種來源的數(shù)據(jù)，支持通過發(fā)布Rest接口實時被動收集數(shù)據(jù)，支持豐富的數(shù)據(jù)清洗轉(zhuǎn)換方式和各種格式的數(shù)據(jù)輸出；擁有插件商店版塊，支持在線搜索、查看、安裝與卸載，提供了流程式界面設(shè)計器，輕松方便的實現(xiàn)數(shù)據(jù)交換過程的定制。

新增重點工具CKettle-Hotpot，實現(xiàn)了對CKettle的調(diào)度與監(jiān)控，通過節(jié)點管理、資源庫管理、任務(wù)調(diào)度、運行監(jiān)控四大模塊，結(jié)合Web圖形界面，改善了對服務(wù)器節(jié)點、Carte節(jié)點的管理，擴展了文件資源庫的功能，開發(fā)了強大靈活的定時控制任務(wù)調(diào)度功能，同時以儀表盤展現(xiàn)形式保障了對各種節(jié)點及任務(wù)的運行監(jiān)控，具備任務(wù)執(zhí)行過程的在線分析功能。

產(chǎn)品優(yōu)勢

CKettle產(chǎn)品以Kettle8.0為基礎(chǔ)二次開發(fā)而來，針對Kettle進行了漢化和功能增加等，更適用于國內(nèi)政企的數(shù)據(jù)處理場景。相較開源Kettle而言，CKettle更快、更小、更準，通過細節(jié)的功能打磨使得更便于國內(nèi)政企使用，同時提供開源軟件不具備的專業(yè)維護環(huán)境，打造了全方位的交流學(xué)習生態(tài)圈，提供專業(yè)技術(shù)人員通過文檔、視頻、實時答疑等方式幫助用戶學(xué)習了解CKettle以及提供更針對性的定制化開發(fā)功能。

對比國內(nèi)目前已面世的幾款ETL工具，其與國產(chǎn)芯片和操作系統(tǒng)的兼容性還未有驗證，而CKettle在上線不足四個月的時間內(nèi)就已經(jīng)通過了統(tǒng)信UOS、華為鯤鵬桌面云V8、中科方德高可信服務(wù)器操作系統(tǒng)V4.0及方德桌面操作系統(tǒng)V3.1等多方兼容性認證，完成了與國內(nèi)幾大重要系統(tǒng)的適配兼容，未來可以依靠這些國產(chǎn)服務(wù)器或操作桌面系統(tǒng)完成更靈活、便捷的數(shù)據(jù)ETL方案開發(fā)。

使用客戶/人群

2020年度重要代表性客戶名稱：重慶市經(jīng)濟和信息化委員會。CKettle通用組態(tài)式大數(shù)據(jù)交換平臺聯(lián)合公司通服數(shù)聚大數(shù)據(jù)平臺，完成了重慶市經(jīng)濟和信息化委員會牽頭的重慶市工業(yè)經(jīng)濟大數(shù)據(jù)平臺建設(shè)，成功助力重慶工業(yè)經(jīng)濟的高質(zhì)量發(fā)展。該項目也經(jīng)歷了中央巡視組、重慶市副市長、全市經(jīng)信體系、發(fā)改委等多層級領(lǐng)導(dǎo)蒞臨視察，獲得一致好評。

在同重要政企合作的同時，CKettle也全面面向互聯(lián)網(wǎng)用戶進行了開放，CKettle 2.0版本經(jīng)過平臺化和國產(chǎn)化的一系列改進完善后，結(jié)合互聯(lián)網(wǎng)上的初步推廣，到目前為止（2020年11月30日）平臺已經(jīng)有約766位用戶注冊、工具下載次數(shù)共計13953次，日均訪問量約有1000次，社區(qū)與技術(shù)交流群活躍度表現(xiàn)較好。

市場價值

CKettle的面世，為國內(nèi)政企用戶提供了更易到達和維護的、符合國內(nèi)生產(chǎn)環(huán)境的數(shù)據(jù)ETL處理方案，同時面向互聯(lián)網(wǎng)個人用戶提供了學(xué)習運用ETL工具到生活生產(chǎn)中的機會，有利于所有CKettle用戶提升對數(shù)據(jù)的處理效率從而提升政企或個人的經(jīng)濟價值，十分有利于推動我國社會數(shù)字經(jīng)濟的發(fā)展。

產(chǎn)品所屬企業(yè)·重慶通信建設(shè)：

重慶市通信建設(shè)有限公司系中國通信服務(wù)股份有限公司旗下的重慶市通信產(chǎn)業(yè)服務(wù)有限公司的子公司，公司成立于1952年，距今近60年通信施工管理歷程，主要從事程控交換、寬帶數(shù)通、通信電源、光電傳輸、光纜干線、通信管道、移動通信、鐵塔安裝、網(wǎng)規(guī)網(wǎng)優(yōu)、網(wǎng)絡(luò)維護、勘察設(shè)計、系統(tǒng)集成、動力環(huán)境監(jiān)控、土建及配套等業(yè)務(wù)。擁有中國電信、移動、聯(lián)通及政企客戶四大目標市場，并長期與華為、中興、愛立信、艾默生、朗訊、上海貝爾阿爾卡特、思科等國內(nèi)外著名設(shè)備制造商合作。業(yè)務(wù)遍及重慶全境，輻射四川、云南、貴州、西藏等周邊省份及部份中東部地區(qū)，是名符其實的西部施工龍頭企業(yè)。

公司先后取得“通信工程專業(yè)承包一級”、“計算機信息系統(tǒng)集成一級”、“涉及國家秘密的計算機信息系統(tǒng)集成乙級”、“通信信息網(wǎng)絡(luò)系統(tǒng)集成甲級”、“智能建筑化專業(yè)承包一級”和ITSS等資質(zhì)。擁有質(zhì)量、環(huán)境和職業(yè)健康安全管理體系認證。

從2005年起，連續(xù)五年獲重慶市高新區(qū)工商分局“高新企業(yè)年檢免檢資格”和市工商局“守合同重信用企業(yè)”稱號;被市經(jīng)濟和信息化委員會評為“誠信系統(tǒng)集成企業(yè)”。2008年代表重慶通信業(yè)界參與汶川抗震搶險被中華全國總工會授予“工人先鋒號”光榮稱號。

2017年順利通過CMMI3認證。2020年11月3日通過CMMI5級認證，成為重慶首家按照CMMI-DEV V2.0標準評估為五級的企業(yè),標志著公司軟件研發(fā)能力與管理水平已達到國際最高標準，具備全球頂級的軟件成熟度及軟件項目管理能力。

來源：數(shù)據(jù)猿

收藏分享

聲明：數(shù)據(jù)猿尊重媒體行業(yè)規(guī)范，相關(guān)內(nèi)容都會注明來源與作者；轉(zhuǎn)載我們原創(chuàng)內(nèi)容時，也請務(wù)必注明“來源：數(shù)據(jù)猿”與作者名稱，否則將會受到數(shù)據(jù)猿追責。