3个月完成国际巨头数仓的替换,浅析广发银行的这场迁移革命

3个月完成国际巨头数仓的替换,浅析广发银行的这场迁移革命
2024年11月27日 18:51 师天浩

文丨师天浩

出品丨师天浩观察(shitianhao01)

广发银行是国内首批组建的股份制商业银行之一、稳坐全球银行TOP100排名,很早就确定了“数字广发”的科技发展战略。

近年来,广发银行研发中心使用华为云数据仓库平台逐步替换了已经使用了12年之久的Oracle数仓,经过3个月生产并行,广发银行完成了新老数据平台的数据迁移和功能改造,顺利完成上游系统、仓库、下游系统、周边配套、用户自主分析等切换,批处理作业整体性能提升80%,信用卡数据处理模块批量作业运行稳定率99.9%,平台性能方面得到明显提升。通过“云化转型”,广发银行信用卡业务在科技助力下,其前中后台产品竞争力、服务质量、作业效率及经营管理能力全部上了全新台阶。

复盘这次经典案例,将为更多银行替换国外数仓产品及核心业务迁移提供“少走弯路”的决策思路。

1、 从Teradata退出中国说起

2023年2月,数据库行业发生一件大事,美国Teradata宣布,对中国当前和未来商业环境的慎重评估,将逐步结束在中国的直接运营。

Teradata成立于1979年,是数据仓库、数据分析、整合营销领域的跨国巨头,在中国数据库市场巅峰时一度碾压Oracle。巅峰时期,Teradata在中国金融业数据仓库市场拥有着50%以上的份额。伴随着中国消费者的业务创新能力越来越强,其带来对技术支撑能力的诉求日益增高,Teradata的潜在问题逐渐暴露出来:

传统产品技术架构对新场景支持能力不足:Teradata数据库一般是与专有硬件结合,以一体机的形式向客户提供,整体扩展性较差且成本高昂。移动互联网时代数据应用场景愈发多元,围绕海量数据存储、查询和分析等需求为数据库产品带来非常多的挑战。

云数据库崛起挤压了原有市场:Teradata全球市场上不仅面临华为云、阿里云、腾讯云等国内云服务商的竞争,更要直面来自包括亚马逊、谷歌、微软等云服务商的较量。从国内多家银行案例中获悉,数据库已从只是“增删查改”的简易功能,逐步向存储各种数据“数据湖”、具备大数据分析能力“数据仓库”的湖仓一体化“进化”。

2、基础软件自主创新乃大势所趋

众所周知,银行、金融、保险等领域的客户对数据安全性要求极高,安全可控已经成为金融科技领域最重要最紧迫的推进战略。中国人民银行、银保监会等主管部门也密集出台文件,指导金融行业核心业务的自主创新。除了基础软件自主创新的大势所趋,以Teradata、Oracle为代表的国外传统数仓,它们上市时间少则二十年,多则已经几十年,技术迭代缓慢严重影响着企业业务快速发展。

1、扩展能力差、系统算力不足;金融行业日常频繁性会有经营活动,其中银行为代表,对数据依赖度极高,对数据仓库各项指标要求极为严苛。以广发银行信用卡业务为例,本身业务每年保持15%的数量的增长,面对高速增长的数据规模和实时性数据的处理需求,传统Oracle数仓大容量横向扩展能力弱,容量和性能成为新业务发展的瓶颈。

2、用户体验差;当互联网蓬勃发展、移动互联网实现全民普及,网上银行、手机银行、电子支付等新业态依次出现,带来了高并发、海量数据、超高峰值等挑战。由于性能瓶颈,传统数仓的月批次作业T+1甚至T+2,无法实现T+0。尤其是在监管报送和经营分析类的业务指标加工场景中,用户无法及时看到相关指标加工数据。

这些现实的技术问题促使银行必须找到“新”解决方案,加之来自政策方面的驱动,替换为国内数仓产品成为唯一出路。

3、国产厂商产品替换国际巨头产品,性能到底是否跟得上?

信用卡业务一直是广发银行的“王牌业务”,1995年该行率先发布了第一张符合国际标准的信用卡,自此之后相继推出国内第一张女性卡、第一张白金卡、第一张港币卡等,至今累计为上亿用户提供贴心的信用卡服务。给重要的业务板块换一个新的数仓,等同于换一个颗心脏,这颗新“心脏”是否能平滑接替任务,性能和功能是否能满足甚至超越核心业务的需求,这是广发银行团队在做产品选型时的最大疑问。

据悉,这次通过华为云进行平台整体切换后,广发银行信用卡数据处理模块,信用卡数据处理模块批量作业运行稳定率99.9%,平台性能方面得到明显提升,其中关键作业运行达标率99%,日跑批时效提升40%以上。

足以证明,国产厂商产品的性能相较于国际巨头产品,不仅缩小差距也在逐渐超越,这或许也是国际巨头产品在国内逐渐被替代的重要原因。

4、 3个月完成新老数据平台的数据迁移和功能改造,流程和工具很关键

银行业和大多数行业不同,信用卡之类的重要业务对业务连续性要求非常严苛,新老集群切换工程既要越快越好,又要防止一切可能的中断风险以及数据丢失风险。

反观广发银行3个月在华为云助力下快速完成了业务高效迁移的案例,在整个金融行业中都是值得学习及参考的模板。

据悉,此次之所以能够顺利地进行数据迁移和功能改造,主要得益于在正式迁移前,广发银行面向全体研发人员准备了一站式迁移开发工具,覆盖各类技术场景,减少开发人员的大量重复开发工作,集中资源攻克迁移中的高难度应用脚本。

可见,在选择可替换的产品时,除了要参考产品能力,还需评估厂商是否可以提供迁移方法论、完备的迁移工具、坚实的迁移保障。

5、银行业“领航”选择,“中国”云乘胜追击

2023年政府工作报告指出,要增强科技创新引领作用,金融监管也强调在关键产品技术上的自主权。多方推动下,替换大潮在加速前行。

进入移动互联网时代后,许多海外数据仓库供应商已无法满足中国互联网迭代需求。尤其是云数据库的火热,高并发访问需求的指数级增长,进一步推动了分布式数据库替代中心化数据库的节奏。金融领域是表现最突出的行业之一,由于数据系统管理弹性需求提升、数据系统访问查询需求提升,对数据的存储、处理、挖掘有更强的需求。

数据显示,华为云已服务中国六大国有银行、八家股份制商业银行以及众多保险、证券客户,应用于全球500+金融机构。其中,广发银行结合全行数据战略规划,以大数据平台、数据仓库为核心,基于华为主机上云解决方案,以华为云Stack构建金融云平台,构筑数据开发、数据分析、知识图谱等能力平台,向全行赋能数据个性加工、灵活分析、智能建模等数据服务,支撑全行数据共享及全面应用。

金融行业一直是支撑经济发展的重要力量,因此银行业自诞生就始终走在数字化前列。在全面数智化的浪潮中,银行更需要“靠谱”的云服务商的助力,为国内经济发展保驾护航。华为云表示,未来将持续赋能广发银行信用卡业务,从存储、算力、数据处理、AI大模型,实现深入的理解和全面的布局,同时以广发银行为模板,助力更多金融企业更快更好地发展。

财经自媒体联盟更多自媒体作者

新浪首页 语音播报 相关新闻 返回顶部