作为亚洲领先的金融科技集团,welab汇立集团自2013年成立以来就一直致力于利用大数据、人工智能等前沿科技,为全球的消费者和金融机构提供多元化的金融科技服务,其中包括运营亚洲首批持牌虚拟银行——welab bank(汇立银行)及其他纯线上消费金融服务,在中国香港、中国内地和印尼市场均处于领先地位,拥有超过6000万用户以及近900家企业客户。
2023年,胡润研究院于广州发布了《2023全球独角兽榜》(global unicorn index 2023),列出了全球成立于2000年之后,价值10亿美元以上的非上市公司。welab汇立集团连续五次上榜,成为大湾区最值得关注的独角兽企业之一。
得益于自研的风险管理系统、专利隐私计算技术和领先的人工智能技术在业内斩获的满满赞誉,welab汇立集团为全球多家金融机构及企业提供独有的金融科技凯发k8官网下载的解决方案。此外,welab汇立集团的智能化客户关系管理服务和智能投顾服务也得到了广泛应用,帮助金融机构提高客户满意度和业绩表现。
业务挑战:数据结构复杂且应用场景多元,传统数据库面对新需求难堪重负
不断攀升的业内口碑给welab带来可观业务量的同时,也让核心系统承受了不小的压力,作为支撑整个业务系统的底层技术,数据库的重要性不言而喻。作为一家拥有金融和科技双重属性的公司,welab更面临以下的业务挑战:
·竞争激烈且快速变化的市场环境–在整个金融科技市场上,行业参与者众多,除bat等互联网巨头外,还有很多银行、消费金融等传统持牌金融机构,因此市场竞争异常激烈。此外,各个企业也都在积极创新,技术迭代日新月异,发展飞速。
·强监管政策和环境–金融科技行业一直以来都是被重点监管的一个行业。近年来,随着规范费率、个人信息保护等政策相继落地,监管力度和监管环境更加收紧,在应对市场和监管上的一些变化时,包括welab在内的金融科技企业都在及时调整,适应变化。
·数据爆发性增长–数据增长主要来自两方面:一是业务增长带来的数据快速增长;二是随着welab数据处理能力的提升,能处理的数据越来越多,基于原始数据加工、计算、衍生出来的数据也越来越多,这两个原因叠加起来,带来了数据的爆发性增长。
·系统稳定高效–任何一家企业,无论是互联网企业还是传统企业,都需要去面对系统高效稳定方面的挑战,对于welab来说也是如此。
凯发k8官网下载的解决方案:从数据特点和技术应用场景出发,充分释放welab核心技术优势
为了解决上述问题,选择一款灵活、稳定、高效的数据库成为welab的当务之急,尤其是需要满足打造卓越的风险控制技术等金融科技公司最重要、最核心能力的需求。在对比了多款数据库后,2014年年底,welab决定选用mongodb数据库,主要基于两方面考量:一个是数据的特点,另一个是技术上的应用场景以及诉求。
就数据特点而言,以风控系统为例,风控系统数据的处理相较于一般业务系统更为复杂多元,包括各种业务数据、用户行为、设备信息、第三方数据、模型数据和决策数据等等。每类数据都呈现出独特的数据特征,并且数据结构、组织方式和应用场景均有所不同。如果将这些结构复杂且场景多元的数据用传统的关系型或其他类型数据库进行存储和处理,显然行不通,而处理这类数据恰好是mongodb的强项。
就技术上的应用场景和诉求而言,在当前激烈的市场环境下,技术应用场景和诉求对开发效率有着较高的要求。为了快速响应市场和监管调整,welab需要数据库具备强大的支持。以welab早期开发决策引擎模块为例,welab最初选择mysql作为底层数据库,却低估了数据增长速度,当业务飞速发展产生海量数据后,传统mysql数据库承受了巨大的压力。每次新增一个字段时,dba甚至需要手动断开所有数据库链接才能执行变更。在这种方式下,开发效率极其低下,而且影响生产稳定性。
在将数据库替换为mongodb之后,这些问题得以迎刃而解:
mongodb提供了更高的开发效率和稳定性,使得welab能够更好地应对市场和监管的变化,提升开发效率。
在现代技术应用中,高并发、高可用以及海量存储易扩展是对nosql数据库的基本要求,这也是系统稳定性的前提。在这方面,mongodb表现出强大的优势。
mongodb提供丰富的索引功能,如地理位置索引和ttl索引,这在welab的日常业务中有着广泛的应用。
值得一提的是,在升级到阿里云数据库mongodb版的过程中,阿里云和mongodb专家们提供了非常专业的凯发官网首页的技术支持,使得整个升级过程得以顺利进行。这不仅体现了双方团队的专业能力,也展示了他们对于用户需求的关注和重视。
价值体现:写入性能提升超50%,释放技术的生机与活力
随着welab业务的不断发展,阿里云数据库mongodb版作为其数据库的核心引擎之一,已经开始在越来越多的业务和运营环节中发挥重要作用。welab凭借先进的金融风控技术,配合mongodb 5.0强大数据处理功能,重新设计和打造了新一代大禹风控系统(wedefend 3.0)。新系统有别于以往任何一代产品,无论在数据处理能力上,还是用户体验上都有着质的飞跃,得到了企业客户的一致好评。
同时,数据库系统升级后,技术提升也体现在三个方面:
吞吐量和稳定性方面都有了明显提升–在2023年7月的一次升级和副本集到分片的改造中,单分片数据量从4.5tb下降到1.5tb,同时带来了写入性能提升超50%,查询性能提升超20%。此外,升级完成后,整个系统没有出现稳定性问题。这表明升级后的阿里云数据库mongodb版更加高效和可靠,为用户提供更好的使用体验。
后续升级成本更低–在过去的版本升级中,除了代码调整外,还需要对整个业务流程进行完整的回归测试。即使完成了这些工作,也无法100%保证升级后生产环境不会出现问题。然而,随着引入mongodb 5.0的stable api的引入和数据同步从mongodb oplog切换到mongodb change streams,升级成本得到了显著降低。
运维成本更低,效率更高–阿里云数据库mongodb版提供更专业的凯发官网首页的技术支持,降低了学习和维护成本。此外,在弹性扩容、容载和备份恢复方面,用户只需通过简单的界面配置即可完成,与以往需要dba手动操作的方式相比,效率得到了显著提升,整体风险也明显降低。
welab汇立集团技术总监黄志鹏表示:“阿里云数据库mongodb版无论从数据特点还是技术要求方面,都完美地匹配了welab的需求。9年间,mongodb已经成功跑在welab的风控系统、决策引擎、审批、客服等核心系统上。目前,阿里云数据库mongodb版在welab内部的部署规模约占所有系统的40%。更为重要的是,由于阿里云和mongodb团队的专业支持,我们的系统升级非常平顺,而且后续的运维和学习成本也更低。”