深圳2021年6月3日 /美通社/ -- 央行印發(fā)的《金融科技(FinTech)發(fā)展規(guī)劃(2019-2021年)》明確提出,建立健全企業(yè)級(jí)大數(shù)據(jù)平臺(tái),進(jìn)一步提升數(shù)據(jù)洞察能力和基于場(chǎng)景的數(shù)據(jù)挖掘能力,充分釋放大數(shù)據(jù)作為基礎(chǔ)性戰(zhàn)略資源的核心價(jià)值。
這為金融行業(yè)的大數(shù)據(jù)基礎(chǔ)設(shè)施建設(shè)提供了很好的指引,各大金融機(jī)構(gòu)正在把大數(shù)據(jù)能力打造成為企業(yè)的核心競(jìng)爭(zhēng)力之一。中國(guó)電財(cái)作為一家頭部財(cái)務(wù)公司,肩負(fù)著為國(guó)家電網(wǎng)成員單位及經(jīng)中國(guó)銀保監(jiān)會(huì)核準(zhǔn)的服務(wù)對(duì)象提供金融服務(wù)的重任,建設(shè)大數(shù)據(jù)平臺(tái)成為其數(shù)字化轉(zhuǎn)型之路上的一個(gè)重要工程。
行業(yè)首創(chuàng)
中國(guó)電財(cái)落地企業(yè)級(jí)大數(shù)據(jù)平臺(tái)
2021年4月1日,中國(guó)電財(cái)公司級(jí)大數(shù)據(jù)平臺(tái)項(xiàng)目第一階段所有建設(shè)任務(wù),全面投產(chǎn)應(yīng)用,實(shí)現(xiàn)了行業(yè)前沿的“流批一體”功能,即融合批計(jì)算和流計(jì)算為一體,降低運(yùn)維成本,提高數(shù)據(jù)計(jì)算結(jié)果的一致性。這標(biāo)志著我國(guó)財(cái)務(wù)公司大數(shù)據(jù)平臺(tái)建設(shè)的理念及技術(shù)都往前跨越了重要一步。
中國(guó)電財(cái)大數(shù)據(jù)平臺(tái)自上線之日起,對(duì)外提供數(shù)據(jù)服務(wù)3300余萬條,有力支撐了國(guó)家電網(wǎng)公司財(cái)務(wù)數(shù)據(jù)日常監(jiān)測(cè)及產(chǎn)業(yè)鏈金融業(yè)務(wù)數(shù)據(jù)回傳需求,并且在中國(guó)電財(cái)經(jīng)營(yíng)管理數(shù)據(jù)統(tǒng)計(jì)、金融監(jiān)管數(shù)據(jù)報(bào)送等工作中發(fā)揮了效用,凸顯出金融大數(shù)據(jù)的集聚和增值作用。
三大亮點(diǎn)
成就中國(guó)電財(cái)大數(shù)據(jù)平臺(tái)領(lǐng)先性
中國(guó)電財(cái)大數(shù)據(jù)平臺(tái)采用“流批一體”數(shù)據(jù)湖建設(shè)架構(gòu),構(gòu)建覆蓋數(shù)據(jù)管理、數(shù)據(jù)運(yùn)營(yíng)、數(shù)據(jù)服務(wù)的全方位數(shù)據(jù)平臺(tái),無論是在技術(shù)、數(shù)據(jù)模型,還是在性能上都具有行業(yè)領(lǐng)先性:
1、首個(gè)業(yè)務(wù)管理、公司管理雙模型,真正實(shí)現(xiàn)數(shù)據(jù)一個(gè)池
大數(shù)據(jù)平臺(tái)數(shù)據(jù)模型融合國(guó)網(wǎng)SG-CIM統(tǒng)一數(shù)據(jù)模型和金融業(yè)務(wù)行業(yè)數(shù)據(jù)模型建設(shè)成果和理念,全面規(guī)劃公司管理和業(yè)務(wù)管理兩大板塊數(shù)據(jù)模型,目前已實(shí)現(xiàn)中國(guó)電財(cái)全部業(yè)務(wù)數(shù)據(jù)納入數(shù)據(jù)模型,后續(xù)繼續(xù)實(shí)現(xiàn)公司管理數(shù)據(jù)模型建設(shè),真正實(shí)現(xiàn)公司數(shù)據(jù)一個(gè)池,全面滿足中國(guó)電財(cái)在數(shù)據(jù)差異化、標(biāo)準(zhǔn)化、特色化管理上的需求。
2、先進(jìn)技術(shù)架構(gòu),高效對(duì)接現(xiàn)有系統(tǒng)
大數(shù)據(jù)平臺(tái)以開源CDH為基礎(chǔ),規(guī)劃離線數(shù)據(jù)、實(shí)時(shí)數(shù)據(jù)處理,全面納入結(jié)構(gòu)化、非結(jié)構(gòu)化數(shù)據(jù),分別采用基于impala的內(nèi)存計(jì)算實(shí)現(xiàn)離線數(shù)據(jù)高效計(jì)算,F(xiàn)link集群建設(shè)實(shí)時(shí)數(shù)據(jù)處理路線,借助流行BI工具搭建公司數(shù)據(jù)分析平臺(tái),restful接口實(shí)現(xiàn)數(shù)據(jù)服務(wù)機(jī)制,從根本上規(guī)劃中國(guó)電財(cái)數(shù)據(jù)平臺(tái)系統(tǒng)建設(shè)藍(lán)圖,逐步解決中國(guó)電財(cái)在數(shù)據(jù)管理、數(shù)據(jù)分析和數(shù)據(jù)運(yùn)營(yíng)上的問題。
3、跨越式提升數(shù)據(jù)計(jì)算性能
中國(guó)電財(cái)公司級(jí)大數(shù)據(jù)平臺(tái)采用分層設(shè)計(jì)、內(nèi)存計(jì)算、并行處理機(jī)制,通過集群式部署,大幅提升數(shù)據(jù)計(jì)算性能。數(shù)據(jù)批處理時(shí)間由老數(shù)據(jù)平臺(tái)的3小時(shí)縮短至45分鐘左右,效率提升了80%,數(shù)據(jù)準(zhǔn)確率大幅提升,解決了中國(guó)電財(cái)在數(shù)據(jù)準(zhǔn)確性、及時(shí)性、高效性上存在的瓶頸和問題。
專業(yè)保障
這條大數(shù)據(jù)平臺(tái)建設(shè)之路不輕松
2020年3月,中國(guó)電財(cái)企業(yè)級(jí)大數(shù)據(jù)平臺(tái)項(xiàng)目正式啟動(dòng),長(zhǎng)亮科技派出了一批具有豐富金融業(yè)務(wù)數(shù)據(jù)平臺(tái)建設(shè)經(jīng)驗(yàn)的專家,密切配合項(xiàng)目建設(shè),那時(shí)正值疫情高危期,阻力遠(yuǎn)比想象中的大。為了保障項(xiàng)目質(zhì)量與進(jìn)度同時(shí)避免疫情給項(xiàng)目帶來的風(fēng)險(xiǎn),長(zhǎng)亮科技項(xiàng)目組一直堅(jiān)守項(xiàng)目地,采用線上、線下協(xié)作方式,有序推進(jìn)項(xiàng)目進(jìn)展。
雙方共克阻力,陸續(xù)完成了現(xiàn)狀分析、需求分析、設(shè)計(jì)開發(fā)、系統(tǒng)集成測(cè)試、用戶驗(yàn)收測(cè)試、性能測(cè)試等工作。
2020年9月7日,實(shí)現(xiàn)項(xiàng)目一期功能成功上線;
2021年4月1日,實(shí)現(xiàn)項(xiàng)目二期功能成功上線。
至此實(shí)現(xiàn)原報(bào)表系統(tǒng)功能全面切換至大數(shù)據(jù)平臺(tái),共計(jì)集成源數(shù)據(jù)項(xiàng)1.51萬余個(gè),日采集數(shù)據(jù)量突破1600萬條,并成功落地8個(gè)一級(jí)業(yè)務(wù)主題模型,涵蓋29個(gè)二級(jí)主題,共226個(gè)數(shù)據(jù)實(shí)體,7015個(gè)數(shù)據(jù)項(xiàng),真正實(shí)現(xiàn)了中國(guó)電財(cái)內(nèi)部數(shù)據(jù)一個(gè)源。
項(xiàng)目順利投產(chǎn)上線并在架構(gòu)及性能上領(lǐng)先于行業(yè)5-10年,長(zhǎng)亮科技再一次用創(chuàng)新精神和專業(yè)服務(wù)為客戶創(chuàng)造價(jià)值,助力中國(guó)電財(cái)在數(shù)字化轉(zhuǎn)型中贏得先機(jī)。
中國(guó)電財(cái)不僅實(shí)現(xiàn)了信息化水平科技和運(yùn)營(yíng)管理能力的全面升級(jí),同時(shí)作為財(cái)務(wù)公司領(lǐng)域首個(gè)基于大數(shù)據(jù)技術(shù)的“流批一體”式數(shù)據(jù)湖建設(shè)項(xiàng)目,也為后續(xù)財(cái)務(wù)公司數(shù)據(jù)架構(gòu)選型提供了重要借鑒意義。