擁有兩位數(shù)的供應(yīng)商、三位數(shù)的系統(tǒng)量、20多年的行業(yè)積累,能想象到在這條件下的數(shù)據(jù)量有多少,而且這可能僅僅是一家金融機(jī)構(gòu)的現(xiàn)狀。
面對巨量的數(shù)據(jù),如何進(jìn)行有效匯總存儲,如何有效治理管控,如何挖掘使用,成為金融機(jī)構(gòu)必須回答的一道難題。
隨著國家對新一代信息技術(shù)的持續(xù)推動(dòng)和金融行業(yè)數(shù)字化轉(zhuǎn)型的交叉融合下,眾多金融機(jī)構(gòu)開始從數(shù)據(jù)層對數(shù)字化轉(zhuǎn)型進(jìn)行重新思考和探索?!皵?shù)字化-數(shù)智化”的大趨勢成為業(yè)內(nèi)共識。
作為深耕行業(yè)近30年,并以創(chuàng)新驅(qū)動(dòng)行業(yè)技術(shù)進(jìn)步和業(yè)務(wù)發(fā)展的金證股份(600446),在助力行業(yè)數(shù)字化轉(zhuǎn)型持續(xù)推進(jìn)的同時(shí),針對行業(yè)數(shù)據(jù)應(yīng)用的具體業(yè)務(wù)場景下的數(shù)據(jù)治理和數(shù)據(jù)資產(chǎn)管理,推出了金證數(shù)據(jù)集成開發(fā)應(yīng)用平臺(簡稱“DIDA平臺”)。
DIDA平臺是金證自研的基礎(chǔ)性通用數(shù)據(jù)平臺,采用大數(shù)據(jù)技術(shù),提供數(shù)據(jù)平臺“匯、存、治、管、用” 能力,具備數(shù)據(jù)采集、數(shù)據(jù)開發(fā)、數(shù)據(jù)資產(chǎn)的功能,讓數(shù)據(jù)成為真正的生產(chǎn)要素,賦能金融企業(yè)的經(jīng)營決策與業(yè)務(wù)創(chuàng)新。

DIDA平臺采用大數(shù)據(jù)體系架構(gòu)、分布式存儲和計(jì)算技術(shù),對多來源多格式多業(yè)務(wù)數(shù)據(jù)按照金融行業(yè)的數(shù)倉模型進(jìn)行分層存儲和加工處理,滿足海量數(shù)據(jù)(603138)存儲和大批量數(shù)據(jù)加工整理的需求。DIDA平臺在功能層面提供離線/實(shí)時(shí)數(shù)據(jù)采集、分布式數(shù)據(jù)存儲、ETL數(shù)據(jù)加工處理、自動(dòng)化調(diào)度執(zhí)行、構(gòu)建企業(yè)數(shù)據(jù)資產(chǎn)、提供對外數(shù)據(jù)服務(wù)等核心功能點(diǎn);在性能方面充分利用分布式計(jì)算的批流處理引擎,滿足高效計(jì)算和準(zhǔn)實(shí)時(shí)計(jì)算需求。
在開發(fā)實(shí)踐層面來看,開發(fā)人員可基于DIDA平臺快速搭建起客戶所需要的數(shù)據(jù)平臺或數(shù)據(jù)倉庫。在數(shù)據(jù)中臺建設(shè)過程中,DIDA平臺可以不考慮底層的大數(shù)據(jù)基礎(chǔ)設(shè)施及計(jì)算、調(diào)度引擎等通用功能,各業(yè)務(wù)開發(fā)團(tuán)隊(duì)可以更專注于上層數(shù)據(jù)應(yīng)用(分析)軟件產(chǎn)品的研發(fā)和交付,從而進(jìn)一步降低在大數(shù)據(jù)基礎(chǔ)設(shè)施方面的開發(fā)投入和時(shí)間。而對于終端客(如證券、資管公司)戶層面,DIDA數(shù)據(jù)平臺能幫助客戶進(jìn)行公司級別的數(shù)據(jù)匯聚、數(shù)據(jù)存儲、數(shù)據(jù)整合、構(gòu)建企業(yè)數(shù)據(jù)資產(chǎn)。DIDA提供的數(shù)據(jù)服務(wù)平臺也可以讓客戶更便捷地開放共享有價(jià)值的數(shù)據(jù),快速展現(xiàn)數(shù)據(jù)成果。
當(dāng)前,金證已完成DIDA平臺1.0版本的發(fā)布,包含了元數(shù)據(jù)管理、數(shù)據(jù)集成、數(shù)據(jù)開發(fā)、流程調(diào)度、數(shù)據(jù)服務(wù)、運(yùn)維中心等多個(gè)子平臺,覆蓋多源異構(gòu)數(shù)據(jù)集成采集;帶業(yè)務(wù)邏輯的數(shù)據(jù)采集轉(zhuǎn)儲;數(shù)據(jù)倉庫/數(shù)據(jù)平臺項(xiàng)目建設(shè)的初期工程,實(shí)現(xiàn)數(shù)據(jù)入湖;離線數(shù)據(jù)開發(fā)、實(shí)時(shí)數(shù)據(jù)開發(fā);要求圖形化實(shí)現(xiàn)數(shù)據(jù)作業(yè)流程拖拉拽配置等具體場景。
目前,DIDA平臺多源異構(gòu)的業(yè)務(wù)系統(tǒng)數(shù)據(jù)采集能力、高性能高效率的數(shù)據(jù)加工處理能力得到行業(yè)客戶高度認(rèn)可,并在益民基金、瑞銀UBS、大河財(cái)富、國都證券等機(jī)構(gòu)實(shí)現(xiàn)上線。后續(xù),DIDA平臺將根據(jù)行業(yè)實(shí)踐的更多場景持續(xù)優(yōu)化。
在行業(yè)“數(shù)字化-數(shù)智化”變局加速演進(jìn)的大潮流中,金證股份將繼續(xù)發(fā)揮技術(shù)與平臺優(yōu)勢,針對行業(yè)需求與客戶訴求,開展關(guān)鍵技術(shù)的創(chuàng)新研發(fā),實(shí)現(xiàn)技術(shù)資源與成果向技術(shù)服務(wù)的轉(zhuǎn)化,為行業(yè)技術(shù)基建能力和創(chuàng)新活力貢獻(xiàn)金證方案。