技术博客

    技术博客  >  以某头部基金实践为例,验证深信服超融合对TA系统承载能力
    以某头部基金实践为例,验证深信服超融合对TA系统承载能力
    背景图 2024-06-24 12:02:01

    本期焦点

    TA(Transfer Agent)开放式基金登记过户系统是交易管理系统的重要组成部分,是登记注册机构向投资者提供账户管理、份额登记、交易清算、红利发放、持有人名册保管的综合服务系统。

    作为开放式基金运作的核心系统之一,承担着投资者基金账户管理以及基金交易引起份额变动登记的重要职责,它既是基金估值核算系统计算每日单位资产净值的份额基数来源,也是基金管理公司 TA 类清算指令或应收数据生成的依据。

    TA 系统能够完成基金交易过程中金额费用以及份额数量的计算,对投资者的交易申请进行确认并就交易引起的份额增减进行准确记录,还可代为处理权益登记分配等事项。

    本篇文章将详细解析深信服超融合在承载TA系统上的应用实践。

    适用行业:基金、证券、银行、保险、期货等。

    应用场景:新一代等级过户平台系统架构

    应用场景:新一代等级过户平台系统架构

    应用架构介绍

    TA的常见部署场景包括使用全物理机、虚拟化+数据库一体机、虚拟化+外置存储承载三类方案,目前大多数用户都已经完成虚拟化的改造,使用虚拟化对接数据库一体机和外置存储来实现,这也是相对比较稳定高效的部署架构。

    本次验证用户现网中采用VMware虚拟化加Oracle一体机的方案来承载TA系统的运行,两台Oracle一体机通过InfiniBand线缆组建RAC应用集群。同时为了保证数据冗余,采用Oracle DG异步复制的方案建设两个备库实例。

    整体结构如下:

    用户现网环境

    用户现网环境

    TA系统组件资源表

    TA系统组件资源表

    需求与痛点

    1. 高性能跑批需求:TA 系统为满足业务使用需求必须提供对数据跑批所需的性能支撑,系统整体性能越高,则跑批所用的时间越短,所以对基础平台的存储IO性能依赖较大。

    2. 资源利用率低:为满足性能需求采用物理机的方式承载 TA,而 TA 系统的跑批一般是在晚上的业务空闲时间进行,那么在其他时间的物理机资源会造成很大程度的浪费。

    3. 维护建设成本高:数据库一体机的建设与后期维护所投入的成本相对通用机来说是比较高的,希望在保障业务正常开展的情况下有一种可以缩减成本的方案。

    测试目标与方法

    测试的主要目标是验证通过深信服超融合承载用户TA业务及系统的可能性,在满足高性能跑批需求的同时,论证解决现有业务系统承载架构痛点的可行方案:

    本次测试从生产环境抽取 3.5T 的真实数据脱敏后作为跑批源数据,记录跑批过程中各阶段业务流程的结算时长,与同数据量数据库一体机跑批时间进行对比,期望所有数据的跑批运算能够在3个小时内完成,满足正常业务开展需要。

    本次测试在深信服超融合环境部署Oracle单机数据库,数据库配置设计与现生产环境保持一致,不做任何额外调优操作。(RAC集群在高并发性能表现上会比单机数据库更好,用户现场测试时间有限所以没有部署RAC)

    本次测试共包括两个跑批场景:

    场景一使用与原生产数据库相同模式的主从异步复制;场景二使用可靠性更高的数据库主从同步复制模式,并分别观测这两种场景的跑批完成时间以论证目标。

    TA的测试跑批流程如下图所示:

    测试流程

    测试环境说明

    为满足用户在资源上的需求,本次项目预计使用五台深信服超融合一体机组成资源池。实际测试也使用五台物理服务器,承载TA客户端以及Oracle DG主备两个数据库。在测场景一时采用DG主从异步复制技术,场景二采用DG主从同步复制。

    深信服测试环境

    深信服测试环境

    TA系统组件资源表

    TA系统组件资源表

    超融合服务器配置表

    超融合服务器配置表

    测试过程与结果

    场景一

    Oracle DG 采用主从异步复制技术,对3.5T的数据量跑批测试结果如下:

    使用超融合环境测试整体业务流跑批用时,结果相较于原生产环境增加15%左右。

    Oracle DG 主从异步复制跑批测试结果

    Oracle DG 主从异步复制跑批测试结果

    场景二

    Oracle DG 采用主从同步复制技术,对3.5T的数据量跑批测试结果如下:

    使用主从同步复制技术的测试结果与异步复制技术大致相同,整体时长15s左右。

    Oracle DG 主从同步复制跑批测试结果

    Oracle DG 主从同步复制跑批测试结果

    测试过程记录

    数据库虚拟机CPU资源使用趋势

    数据库虚拟机CPU资源使用趋势

    数据库虚拟机内存资源使用趋势

    数据库虚拟机内存资源使用趋势

    数据库虚拟机网卡资源占用趋势

    数据库虚拟机网卡资源占用趋势

    数据库虚拟机磁盘IO波动趋势

    数据库虚拟机磁盘IO波动趋势

    数据库虚拟机磁盘吞吐波动趋势

    数据库虚拟机磁盘吞吐波动趋势

    数据库虚拟机磁盘时延趋势

    数据库虚拟机磁盘时延趋势

    测试结果汇总及分析

    经过对源数据的17个业务流程跑批测试,从测试数据与原生产环境的测试数据来看:

    • 使用深信服超融合环境测试业务流跑批用时为2小时28分钟,满足用户预期。

    • 使用 Oracle DG 主从异步复制技术,业务跑批用时相较于原生产环境增加15%

    • 使用 Oracle DG 主从同步复制技术,业务跑批用时相较于异步复制增加了15s

    经过对整体测试过程的记录数据分析:

    在整个测试过程中,业务系统和数据库虚拟机的资源均未到达瓶颈,整体的跑批时间在现有数据结果的基础上仍然存在优化缩减的空间。原数据库运行在一体机服务器上,系统参数经过Oracle软件适配和修改,迁移至超融合虚拟化环境之后并未进行参数优化与调整,故而导致业务性能无法发挥最高效果。

    对比测试的差异数据主要集中在批处理阶段前后,分析相差15%的原因是在数据库层面未匹配新的硬件平台和超融合架构进行相关调优。在后续交付过程中可以采用深信服数据库管理平台进行优化,经过和深信服超融合平台特性的深度调优,性能可进一步优化20%左右。

    用户观点

    某头部基金基础架构部负责人:

    从跑批结果看,与使用数据库一体机相比,深信服超融合对TA的承载性能稍有下降,跑批时间长了大概15%左右,但考虑到硬件平台差异及数据库软件适配性,属于可接受范畴。

    从资源利用率角度看,以TA系统为例,跑批一般会在晚上进行,那其余空闲时间可以用来跑其他业务,比如桌面云,实现时分复用,这是数据库一体机所不具备的,可以作为未来可探索的场景之一。

    从建设成本的角度看,牺牲一部分可接受范围内的耗时,换取相对低的建设成本,是比较划算的考虑。

    综合来看,使用超融合作为TA承载平台是一条很有价值的技术路线选项。

    场景价值

    性能卓越,满足跑批需求

    在性能层面深信服超融合经过对计算/网络/存储的全栈性能优化,Oracle 数据库的性能测试数据高达121.5w TPM。使用深信服超融合承载TA系统对3.5T的数据量进行跑批结算耗时2小时28分钟,完全满足用户数据结算的时间需求。

    动态调度,资源使用率提高25%

    在资源层面深信服超融合基于虚拟化技术实现资源的动态调度能力,相比于数据库一体机的资源独占模式,物理资源利用率提高25%以上。同时针对TA系统跑批这种定时任务来说,可在非跑批时间段将资源调度给其他系统使用,进一步提高使用率。

    简单易用,成本降低40%以上

    深信服超融合软件使用三台X86服务器即可组成资源池,同时提供计算、网络、存储等多类基础设施资源;基于超融合提供数据库管理平台支撑数据库系统的全生命周期管理,简化数据库运维工作;整体IT成本相比于原数据库一体机方案降低40%以上。

    分割线

    云话技术是深信服打造的一档云技术内容专栏,将定期为大家推送云计算相关的技术解析、场景实践等内容,为大家深度解析深信服在云计算领域的创新能力、技术动态、场景应用及前瞻分析等内容。

    联系我们