实战 | 科技创新赋能银行传统业务提质增效
- 2024-02-22 浏览:1674
作者:中国邮政储蓄银行软件研发中心 潘华 杨晓晖 李飞 张瑞琴
邮政储蓄银行会计处理平台作为会计核算中心,每天处理上亿笔核算流水,支持全行主要业务系统6亿个人客户及其他账户的会计核算需要。随着大数据、移动互联网、云计算、人工智能等新技术的快速发展与普遍运用,以及利差收窄、金融脱媒、互联网金融等市场环境的冲击和挑战,企业的核算要求和场景变得更为复杂。尤其在外部监管和内部运营对会计处理平台的会计信息质量、信息披露时效性等都提出了更高要求背景下,老一代会计平台的集中式处理已难以满足业务发展需要,业务和技术的创新发展迫在眉睫。
在金融科技发展和自主可控目标的催动下,邮政储蓄银行建设基于自主可控服务器、自主可控操作系统、开源分布式大数据平台和自主研发的分布式系统的新一代会计处理平台,从底层采用开源分布式架构,解决单体架构的容量天花板问题,进一步助力邮政储蓄银行业务发展。
一、业务创新
新一代会计处理平台实现了各类金融业务处理与会计核算的分离、“全行一本帐”和“零级清算”的目标。
1.各司其职,发挥所长。业务系统和会计处理平台分别负责业务处理和会计核算,为业务系统减负,前台业务处理不再关注核算信息,实现交易与核算“解耦”,业务核算分离,快速响应业务发展需要,提升全行的业务服务效能。
2.简化层级,清晰账务。采用“全行一本账”的核算规则,实现“全行单核算主体”。不同核算机构之间账户资金的划转,不再采用“行内往来款项”或“存放上下级款项”逐级清算的核算规则,而是以两个账户间的转账模式处理,实现零级清算。
3.并驾齐驱,均衡资源。采用日间多批次准实时批量模式,实现并行处理及模块化分工、均衡分时段处理的目标。与原有处理相比,节省了更新分户余额、计提利息、损益结转等作业耗时,采用流处理技术,提高了系统吞吐量和容错能力。
二、技术创新
新一代会计处理平台基于自主可控设备构建了“分布式内存批处理平台”“分布式实时计算平台”“分布式海量数据实时查询平台”三大基础技术平台,采用分布式架构和开源技术,使用大数据技术和流处理技术替换传统的商业数据库架构,构建基于分布式大数据平台的核算引擎,突破了单体应用性能瓶颈。
系统的技术架构如图所示。系统自上而下分为接入层、业务处理层、数据层和平台管理层。接入层采用规则引擎对接收的消息进行归集。采用RabbitMQ高吞吐量的分布式发布订阅消息系统构建,可同时接收大量数据并行加工处理,并且易于扩展。
图 新一代会计处理平台技术架构
业务处理层的实时流处理和批处理相结合。其中实时流处理主要采用开源Storm计算框架,采用其处理低延时、容错性强、易于应用开发、水平扩展能力强等特点,进行标准流水数据流式处理转换。批处理采用Hadoop原生的MapReduce计算框架对大量数据进行分布式计算并形成汇总结果。
数据层采用Hadoop开源生态中的HDFS分布式文件系统作为底层数据存储。HDFS优点是可在价格低廉服务器上实现高效的海量数据存储及访问。另外也采用基于HDFS的HBase数据库以便于进行数据查询、分析。同时,为了保证数据接入层的处理效率,引擎规则将全部存储于Redis内存数据库中。为提高联机交易响应时间,将二级索引数据存储在ElasticSearch中,快速响应用户的查询请求。
平台管理层采用Ambari实现Hadoop各项组件集成,使各组件/产品间达到较好的一致协调性,从而保证整个平台的稳定运行。另外,还采用Zookeeper对系统服务进行全面配置管理。
1.全面开源,科技自主可控。新一代会计处理平台全部采用开源大数据技术,并完成相关技术组件在自主可控设备上的兼容性验证工作。
2.技术创新,性能质的飞跃。一是采用实时计算技术来处理数亿级银行业务流水,处理效率较传统的分布式架构提升了3倍,系统处理性能大幅增强。二是满足全国海量数据、条件多样化的查询需求和性能要求。采用HBase做为数据存储,ElasticSearch做为分布式索引,结合实时和离线数据同步,并通过倒排序索引算法,实现各种业务数据查询的毫秒级查询。三是采用Hive On Spark技术,动态分配任务、智能调整集群资源,大幅度地提高了日终处理效率,日终批量时间较原来缩短3~5倍。
三、科技创新赋能业务发展
新一代会计处理平台构建了“全行一本账”的核算体系,并实现了会计核算工作的集中管理,有效提升了会计工作质效,为邮政储蓄银行财会管理工作打下了坚实的基础,所产生的价值不容小觑。
首先,会计引擎具有标准统一、参数可配置化的优点,无需大量开发即可实现会计记账功能,能够快速响应新产品的研发上线需求,有效支持业务发展。
其次,可根据各项业务特性和管理要求,按照不同维度分设账户进行精细化核算。并实现对大部分业务的利息、手续费等收支的按日计提功能,进一步为财务分析和经营决策提供有力支撑,打造了未来财会工作的数智化优势。
最后,在技术性能上,系统吞吐量、批处理时长、联机查询等性能较老系统均有大幅提升。日间账务处理峰值提升66.7%,账务核心日终时长提升20%,普通日批处理时长缩短42.1%,月末日批处理时长缩短53.8%,季度结息处理时长缩短90%,每日计提处理时长缩短50%,机构撤并性能提升66%。为邮政储蓄银行财务会计数字化转型、提高财务监管报送等能力提供了坚实的科技保障。
四、新技术应用的效益分析
科技创新赋能银行传统业务后,深化业技融合,会计管理模式得到了充分创新。在快速响应业务发展,推动会计数智化发展,自主可控等多方面,新一代会计处理平台自上线以来,都取得了明显的经济和社会效益。
1.快速响应,服务客户。新一代会计处理平台采用分布式大数据技术架构,打破了传统技术架构的多项性能天花板,具备横向扩展能力,以更优的效率和稳定性赋能前线业务系统快速调整的能力,更好地服务客户,这是其最显著的价值。
2.敢为人先,自主可控。新一代会计处理平台首次实现设备全面自主可控,开源技术替换商业中间件,在软件和硬件层面都实现了核心技术的安全可控,有效降低了软硬件成本。
新一代会计处理平台对大数据技术架构在自主可控设备上的应用积累了大量一手资料和宝贵经验,为自主可控设备的推广和使用进行了有益探索。新一代会计处理平台的建设,符合我国信息产业技术创新政策导向。我们坚持自主创新,以数字化转型,科技创新赋能业务发展为目标,精准地把握了技术发展的态势,采用开源技术集众智、采众长,加速软件迭代升级,促进产用协同创新,推动产业生态完善。以较低的实施成本、较小的实施风险和较短的建设周期,实现了分布式架构转型,在信创以及开源技术生态的推陈出新发展上,探索出一条新道路。
新一代会计处理平台的投产,是推动银行数字化转型,大数据开源技术和自主可控化技术应用的新里程,是账务核算向智能化发展的起点,对于促进银行传统金融业务的发展具有重要意义。
五、总结与展望
新一代会计处理平台率先基于自主可控设备,在行业内实践“业会分离”,实现了全行业务流水会计核算的集中处理。将会计核算功能从业务系统剥离,简化业务系统的处理流程,助力业务的快速发展,实现全行各类业务的明细级核算,统一生成全行各级机构报表,为业务及后线分析系统提供了各类财务数据。在项目建设过程中,我们始终紧跟创新发展的脚步,不断进行业务流程和技术架构的更新,赋能业务发展,完美契合邮政储蓄银行“进步!与您同步”的理念,更好服务业务发展,更好服务客户。
本文来源:微信公众号《金融电子化》
免责声明:所载内容来源互联网、微信公众号等公开渠道,我们对文中观点保持中立,仅供参考、交流等非商业目的。转载的稿件版权归原作者和机构所有,如有侵权,请联系我们删除。