實(shí)戰(zhàn) | 科技創(chuàng)新賦能銀行傳統(tǒng)業(yè)務(wù)提質(zhì)增效
- 2024-02-22 瀏覽:1514
作者:中國(guó)郵政儲(chǔ)蓄銀行軟件研發(fā)中心?潘華 楊曉暉 李飛 張瑞琴
郵政儲(chǔ)蓄銀行會(huì)計(jì)處理平臺(tái)作為會(huì)計(jì)核算中心,每天處理上億筆核算流水,支持全行主要業(yè)務(wù)系統(tǒng)6億個(gè)人客戶及其他賬戶的會(huì)計(jì)核算需要。隨著大數(shù)據(jù)、移動(dòng)互聯(lián)網(wǎng)、云計(jì)算、人工智能等新技術(shù)的快速發(fā)展與普遍運(yùn)用,以及利差收窄、金融脫媒、互聯(lián)網(wǎng)金融等市場(chǎng)環(huán)境的沖擊和挑戰(zhàn),企業(yè)的核算要求和場(chǎng)景變得更為復(fù)雜。尤其在外部監(jiān)管和內(nèi)部運(yùn)營(yíng)對(duì)會(huì)計(jì)處理平臺(tái)的會(huì)計(jì)信息質(zhì)量、信息披露時(shí)效性等都提出了更高要求背景下,老一代會(huì)計(jì)平臺(tái)的集中式處理已難以滿足業(yè)務(wù)發(fā)展需要,業(yè)務(wù)和技術(shù)的創(chuàng)新發(fā)展迫在眉睫。
在金融科技發(fā)展和自主可控目標(biāo)的催動(dòng)下,郵政儲(chǔ)蓄銀行建設(shè)基于自主可控服務(wù)器、自主可控操作系統(tǒng)、開(kāi)源分布式大數(shù)據(jù)平臺(tái)和自主研發(fā)的分布式系統(tǒng)的新一代會(huì)計(jì)處理平臺(tái),從底層采用開(kāi)源分布式架構(gòu),解決單體架構(gòu)的容量天花板問(wèn)題,進(jìn)一步助力郵政儲(chǔ)蓄銀行業(yè)務(wù)發(fā)展。
一、業(yè)務(wù)創(chuàng)新
新一代會(huì)計(jì)處理平臺(tái)實(shí)現(xiàn)了各類金融業(yè)務(wù)處理與會(huì)計(jì)核算的分離、“全行一本帳”和“零級(jí)清算”的目標(biāo)。
1.各司其職,發(fā)揮所長(zhǎng)。業(yè)務(wù)系統(tǒng)和會(huì)計(jì)處理平臺(tái)分別負(fù)責(zé)業(yè)務(wù)處理和會(huì)計(jì)核算,為業(yè)務(wù)系統(tǒng)減負(fù),前臺(tái)業(yè)務(wù)處理不再關(guān)注核算信息,實(shí)現(xiàn)交易與核算“解耦”,業(yè)務(wù)核算分離,快速響應(yīng)業(yè)務(wù)發(fā)展需要,提升全行的業(yè)務(wù)服務(wù)效能。
2.簡(jiǎn)化層級(jí),清晰賬務(wù)。采用“全行一本賬”的核算規(guī)則,實(shí)現(xiàn)“全行單核算主體”。不同核算機(jī)構(gòu)之間賬戶資金的劃轉(zhuǎn),不再采用“行內(nèi)往來(lái)款項(xiàng)”或“存放上下級(jí)款項(xiàng)”逐級(jí)清算的核算規(guī)則,而是以兩個(gè)賬戶間的轉(zhuǎn)賬模式處理,實(shí)現(xiàn)零級(jí)清算。
3.并駕齊驅(qū),均衡資源。采用日間多批次準(zhǔn)實(shí)時(shí)批量模式,實(shí)現(xiàn)并行處理及模塊化分工、均衡分時(shí)段處理的目標(biāo)。與原有處理相比,節(jié)省了更新分戶余額、計(jì)提利息、損益結(jié)轉(zhuǎn)等作業(yè)耗時(shí),采用流處理技術(shù),提高了系統(tǒng)吞吐量和容錯(cuò)能力。
二、技術(shù)創(chuàng)新
新一代會(huì)計(jì)處理平臺(tái)基于自主可控設(shè)備構(gòu)建了“分布式內(nèi)存批處理平臺(tái)”“分布式實(shí)時(shí)計(jì)算平臺(tái)”“分布式海量數(shù)據(jù)實(shí)時(shí)查詢平臺(tái)”三大基礎(chǔ)技術(shù)平臺(tái),采用分布式架構(gòu)和開(kāi)源技術(shù),使用大數(shù)據(jù)技術(shù)和流處理技術(shù)替換傳統(tǒng)的商業(yè)數(shù)據(jù)庫(kù)架構(gòu),構(gòu)建基于分布式大數(shù)據(jù)平臺(tái)的核算引擎,突破了單體應(yīng)用性能瓶頸。
系統(tǒng)的技術(shù)架構(gòu)如圖所示。系統(tǒng)自上而下分為接入層、業(yè)務(wù)處理層、數(shù)據(jù)層和平臺(tái)管理層。接入層采用規(guī)則引擎對(duì)接收的消息進(jìn)行歸集。采用RabbitMQ高吞吐量的分布式發(fā)布訂閱消息系統(tǒng)構(gòu)建,可同時(shí)接收大量數(shù)據(jù)并行加工處理,并且易于擴(kuò)展。
圖? 新一代會(huì)計(jì)處理平臺(tái)技術(shù)架構(gòu)
業(yè)務(wù)處理層的實(shí)時(shí)流處理和批處理相結(jié)合。其中實(shí)時(shí)流處理主要采用開(kāi)源Storm計(jì)算框架,采用其處理低延時(shí)、容錯(cuò)性強(qiáng)、易于應(yīng)用開(kāi)發(fā)、水平擴(kuò)展能力強(qiáng)等特點(diǎn),進(jìn)行標(biāo)準(zhǔn)流水?dāng)?shù)據(jù)流式處理轉(zhuǎn)換。批處理采用Hadoop原生的MapReduce計(jì)算框架對(duì)大量數(shù)據(jù)進(jìn)行分布式計(jì)算并形成匯總結(jié)果。
數(shù)據(jù)層采用Hadoop開(kāi)源生態(tài)中的HDFS分布式文件系統(tǒng)作為底層數(shù)據(jù)存儲(chǔ)。HDFS優(yōu)點(diǎn)是可在價(jià)格低廉服務(wù)器上實(shí)現(xiàn)高效的海量數(shù)據(jù)存儲(chǔ)及訪問(wèn)。另外也采用基于HDFS的HBase數(shù)據(jù)庫(kù)以便于進(jìn)行數(shù)據(jù)查詢、分析。同時(shí),為了保證數(shù)據(jù)接入層的處理效率,引擎規(guī)則將全部存儲(chǔ)于Redis內(nèi)存數(shù)據(jù)庫(kù)中。為提高聯(lián)機(jī)交易響應(yīng)時(shí)間,將二級(jí)索引數(shù)據(jù)存儲(chǔ)在ElasticSearch中,快速響應(yīng)用戶的查詢請(qǐng)求。
平臺(tái)管理層采用Ambari實(shí)現(xiàn)Hadoop各項(xiàng)組件集成,使各組件/產(chǎn)品間達(dá)到較好的一致協(xié)調(diào)性,從而保證整個(gè)平臺(tái)的穩(wěn)定運(yùn)行。另外,還采用Zookeeper對(duì)系統(tǒng)服務(wù)進(jìn)行全面配置管理。
1.全面開(kāi)源,科技自主可控。新一代會(huì)計(jì)處理平臺(tái)全部采用開(kāi)源大數(shù)據(jù)技術(shù),并完成相關(guān)技術(shù)組件在自主可控設(shè)備上的兼容性驗(yàn)證工作。
2.技術(shù)創(chuàng)新,性能質(zhì)的飛躍。一是采用實(shí)時(shí)計(jì)算技術(shù)來(lái)處理數(shù)億級(jí)銀行業(yè)務(wù)流水,處理效率較傳統(tǒng)的分布式架構(gòu)提升了3倍,系統(tǒng)處理性能大幅增強(qiáng)。二是滿足全國(guó)海量數(shù)據(jù)、條件多樣化的查詢需求和性能要求。采用HBase做為數(shù)據(jù)存儲(chǔ),ElasticSearch做為分布式索引,結(jié)合實(shí)時(shí)和離線數(shù)據(jù)同步,并通過(guò)倒排序索引算法,實(shí)現(xiàn)各種業(yè)務(wù)數(shù)據(jù)查詢的毫秒級(jí)查詢。三是采用Hive On Spark技術(shù),動(dòng)態(tài)分配任務(wù)、智能調(diào)整集群資源,大幅度地提高了日終處理效率,日終批量時(shí)間較原來(lái)縮短3~5倍。
三、科技創(chuàng)新賦能業(yè)務(wù)發(fā)展
新一代會(huì)計(jì)處理平臺(tái)構(gòu)建了“全行一本賬”的核算體系,并實(shí)現(xiàn)了會(huì)計(jì)核算工作的集中管理,有效提升了會(huì)計(jì)工作質(zhì)效,為郵政儲(chǔ)蓄銀行財(cái)會(huì)管理工作打下了堅(jiān)實(shí)的基礎(chǔ),所產(chǎn)生的價(jià)值不容小覷。
首先,會(huì)計(jì)引擎具有標(biāo)準(zhǔn)統(tǒng)一、參數(shù)可配置化的優(yōu)點(diǎn),無(wú)需大量開(kāi)發(fā)即可實(shí)現(xiàn)會(huì)計(jì)記賬功能,能夠快速響應(yīng)新產(chǎn)品的研發(fā)上線需求,有效支持業(yè)務(wù)發(fā)展。
其次,可根據(jù)各項(xiàng)業(yè)務(wù)特性和管理要求,按照不同維度分設(shè)賬戶進(jìn)行精細(xì)化核算。并實(shí)現(xiàn)對(duì)大部分業(yè)務(wù)的利息、手續(xù)費(fèi)等收支的按日計(jì)提功能,進(jìn)一步為財(cái)務(wù)分析和經(jīng)營(yíng)決策提供有力支撐,打造了未來(lái)財(cái)會(huì)工作的數(shù)智化優(yōu)勢(shì)。
最后,在技術(shù)性能上,系統(tǒng)吞吐量、批處理時(shí)長(zhǎng)、聯(lián)機(jī)查詢等性能較老系統(tǒng)均有大幅提升。日間賬務(wù)處理峰值提升66.7%,賬務(wù)核心日終時(shí)長(zhǎng)提升20%,普通日批處理時(shí)長(zhǎng)縮短42.1%,月末日批處理時(shí)長(zhǎng)縮短53.8%,季度結(jié)息處理時(shí)長(zhǎng)縮短90%,每日計(jì)提處理時(shí)長(zhǎng)縮短50%,機(jī)構(gòu)撤并性能提升66%。為郵政儲(chǔ)蓄銀行財(cái)務(wù)會(huì)計(jì)數(shù)字化轉(zhuǎn)型、提高財(cái)務(wù)監(jiān)管報(bào)送等能力提供了堅(jiān)實(shí)的科技保障。
四、新技術(shù)應(yīng)用的效益分析
科技創(chuàng)新賦能銀行傳統(tǒng)業(yè)務(wù)后,深化業(yè)技融合,會(huì)計(jì)管理模式得到了充分創(chuàng)新。在快速響應(yīng)業(yè)務(wù)發(fā)展,推動(dòng)會(huì)計(jì)數(shù)智化發(fā)展,自主可控等多方面,新一代會(huì)計(jì)處理平臺(tái)自上線以來(lái),都取得了明顯的經(jīng)濟(jì)和社會(huì)效益。
1.快速響應(yīng),服務(wù)客戶。新一代會(huì)計(jì)處理平臺(tái)采用分布式大數(shù)據(jù)技術(shù)架構(gòu),打破了傳統(tǒng)技術(shù)架構(gòu)的多項(xiàng)性能天花板,具備橫向擴(kuò)展能力,以更優(yōu)的效率和穩(wěn)定性賦能前線業(yè)務(wù)系統(tǒng)快速調(diào)整的能力,更好地服務(wù)客戶,這是其最顯著的價(jià)值。
2.敢為人先,自主可控。新一代會(huì)計(jì)處理平臺(tái)首次實(shí)現(xiàn)設(shè)備全面自主可控,開(kāi)源技術(shù)替換商業(yè)中間件,在軟件和硬件層面都實(shí)現(xiàn)了核心技術(shù)的安全可控,有效降低了軟硬件成本。
新一代會(huì)計(jì)處理平臺(tái)對(duì)大數(shù)據(jù)技術(shù)架構(gòu)在自主可控設(shè)備上的應(yīng)用積累了大量一手資料和寶貴經(jīng)驗(yàn),為自主可控設(shè)備的推廣和使用進(jìn)行了有益探索。新一代會(huì)計(jì)處理平臺(tái)的建設(shè),符合我國(guó)信息產(chǎn)業(yè)技術(shù)創(chuàng)新政策導(dǎo)向。我們堅(jiān)持自主創(chuàng)新,以數(shù)字化轉(zhuǎn)型,科技創(chuàng)新賦能業(yè)務(wù)發(fā)展為目標(biāo),精準(zhǔn)地把握了技術(shù)發(fā)展的態(tài)勢(shì),采用開(kāi)源技術(shù)集眾智、采眾長(zhǎng),加速軟件迭代升級(jí),促進(jìn)產(chǎn)用協(xié)同創(chuàng)新,推動(dòng)產(chǎn)業(yè)生態(tài)完善。以較低的實(shí)施成本、較小的實(shí)施風(fēng)險(xiǎn)和較短的建設(shè)周期,實(shí)現(xiàn)了分布式架構(gòu)轉(zhuǎn)型,在信創(chuàng)以及開(kāi)源技術(shù)生態(tài)的推陳出新發(fā)展上,探索出一條新道路。
新一代會(huì)計(jì)處理平臺(tái)的投產(chǎn),是推動(dòng)銀行數(shù)字化轉(zhuǎn)型,大數(shù)據(jù)開(kāi)源技術(shù)和自主可控化技術(shù)應(yīng)用的新里程,是賬務(wù)核算向智能化發(fā)展的起點(diǎn),對(duì)于促進(jìn)銀行傳統(tǒng)金融業(yè)務(wù)的發(fā)展具有重要意義。
五、總結(jié)與展望
新一代會(huì)計(jì)處理平臺(tái)率先基于自主可控設(shè)備,在行業(yè)內(nèi)實(shí)踐“業(yè)會(huì)分離”,實(shí)現(xiàn)了全行業(yè)務(wù)流水會(huì)計(jì)核算的集中處理。將會(huì)計(jì)核算功能從業(yè)務(wù)系統(tǒng)剝離,簡(jiǎn)化業(yè)務(wù)系統(tǒng)的處理流程,助力業(yè)務(wù)的快速發(fā)展,實(shí)現(xiàn)全行各類業(yè)務(wù)的明細(xì)級(jí)核算,統(tǒng)一生成全行各級(jí)機(jī)構(gòu)報(bào)表,為業(yè)務(wù)及后線分析系統(tǒng)提供了各類財(cái)務(wù)數(shù)據(jù)。在項(xiàng)目建設(shè)過(guò)程中,我們始終緊跟創(chuàng)新發(fā)展的腳步,不斷進(jìn)行業(yè)務(wù)流程和技術(shù)架構(gòu)的更新,賦能業(yè)務(wù)發(fā)展,完美契合郵政儲(chǔ)蓄銀行“進(jìn)步!與您同步”的理念,更好服務(wù)業(yè)務(wù)發(fā)展,更好服務(wù)客戶。
本文來(lái)源:微信公眾號(hào)《金融電子化》
免責(zé)聲明:所載內(nèi)容來(lái)源互聯(lián)網(wǎng)、微信公眾號(hào)等公開(kāi)渠道,我們對(duì)文中觀點(diǎn)保持中立,僅供參考、交流等非商業(yè)目的。轉(zhuǎn)載的稿件版權(quán)歸原作者和機(jī)構(gòu)所有,如有侵權(quán),請(qǐng)聯(lián)系我們刪除。