池化整合多元数据库,zData X 一体机助力证券公司IT基础架构革新

news/2024/5/10 2:06:00

引言

近期,云和恩墨 zData X 多元数据库一体机(以下简称 zData X)在某证券公司的OA、短信和CRM业务系统中成功上线,标志着其IT基础架构完成从集中式存储向池化高性能分布式存储的转变。zData X 成功整合了该证券公司使用的达梦、Oracle、MySQL、PostgreSQL等多套不同类型数据库,实现了资源利用率40%的提升,并显著降低了基础设施成本和运维管理复杂度。此外,业务系统的查询性能得到了10倍以上的提升,充分满足了业务系统对高性能、高可用、易扩展以及信创化的多方面要求。此次基础架构的升级改造不仅为案例客户的数据库系统建设提供了理论和技术支持,也为从一般业务系统向核心业务系统的渐进式改造奠定了基础。

01

金融科技和信创趋势下,券商布局IT基础架构革新

在业务快速发展的带动下,案例客户的业务系统变得越来越多样化,数据量也随之激增。为了支撑核心业务,该证券公司选择了 Oracle 和 MySQL 作为数据库引擎,并在近年来的政策和业务发展驱动下,逐步引入了达梦等国产数据库。目前,以 MySQL、Oracle 为主的数据库数量已超过百套。同时,为了提升数据分析效率,该证券公司还引入了数据仓库平台和大数据应用平台,以支撑分析类业务。

在这种多元数据库环境下,随着数据量的激增,数据架构规划和设计中的问题逐渐显现:

  • 性能问题日益突出:核心数据库的TOP SQL语句响应时间不断增加,受限于集中式存储控制器的瓶颈,I/O能力无法满足业务需求,导致CPU消耗增加,影响业务性能。

  • 数据库系统扩容困难:受限于集中式数据库的特性,大多数数据库缺乏有效的扩容方案,而 Oracle 的RAC虽然可以增加节点,但性能增益并不显著,无法实现真正的线性扩容。

  • 系统资源利用率不足:为确保数据库系统稳定运行,核心系统的数据库资源配置较高,导致IT成本居高不下。

  • 信创挑战:金融信创的落地应用需要将外部政策与监管要求转化为内部实践,同时探索更先进的数字化底层基础技术。

面对挑战,案例客户作为一家在国内证券行业具有竞争力和影响力的上市券商,积极探索一套能够稳定支撑、敏捷响应、降本增效且符合自主创新路径的IT基础架构,以适应未来业务发展的需求。

02

从集中式架构到池化分布式架构的成功迁移

2023年,该证券公司引入了云和恩墨的多元数据库一体机 zData X,将IT基础架构从集中式改造为分布式,实现了多元异构数据库系统的池化整合,有效降低了IT成本,提升了资源利用率和系统性能。

ce09efa8fbd4e826366533f84450c328.png

解决方案架构图

03

实践进阶,构建面向未来的多元数据库高性能运行平台

zData X 基于云和恩墨自研的高性能分布式存储软件 zStorage,实现存算分离架构,融合高性能计算、分布式全闪存存储、RoCE网络和数据库管理服务,支持多种商业、开源和国产数据库,包括 Oracle、MySQL、PostgreSQL、MogDB、达梦、人大金仓、openGauss 等,并可根据需求进行配置,满足不同规模系统对数据库性能、可靠性和扩展性的要求。在案例客户的数据库基础架构改造项目中,zData X 在技术层面实现了多项创新:

  • 自适应锁核能力:通过线程绑定固定CPU核,减少上下文切换开销,每I/O节省10-20微秒,降低关键业务时延。

  • 自适应Cache锁能力:数据库分布式存储读写线程绑核,减少锁的争抢和排队开销,使数据库读写性能提升4倍。

  • 支持双模副本能力:同时支持传统两副本、三副本模式和性能三副本模式,写时延降低50%,提供更强的分布式存储性能保障。

  • 高可用能力:能够应对各种故障场景,保障数据库稳定运行,提升业务系统稳定性。

从技术指标来看,基于 zData X 的分布式存储数据库架构,在整体性能上远超“x86+集中存储”的架构。以3个存储节点为例,单节点IOPS超过40万,系统总体IOPS超过百万。zData X 上线后,各项性能指标显著提升,DB Time降低至原来的1/20,SQL语句执行时间和I/O响应时间也均有大幅缩短。

从业务角度来看,该证券公司的常用业务功能(如:转岗人员统计、业务办理情况统计、人员职位信息变动、执业资格每日变动、转岗人员每日变动、员工考核角色设置等)的查询速度得到了大幅提升,基本都在10倍以上,前端用户体验显著改善。

04

小结

zData X 通过池化整合了案例客户的多元异构数据库环境,实现了多数据库共享存储资源池,资源利用率提升40%。zData X 具备的在线扩展能力,可以根据需求增加存储容量、存储节点和数据库节点,从而满足客户未来的扩容需求。同时,zData X 提供的软件定义存储能力,支持不同存储介质和不同品牌的服务器,构成不同的存储资源池,对该证券公司现有设备进行利旧使用,达到保护投资的目的。

通过本次基础架构的改造升级,案例客户的业务系统实现了性能、可用性和扩展性的全面提升,信创化程度显著提高;同时,资源使用单位成本和运维管理复杂度得到了有效降低。更重要的是,这为后续核心数据库的升级改造提供了可靠的实践路径参考。

f5d64ff0f06db0933a62133de8dc51f0.gif

数据驱动,成就未来,云和恩墨,不负所托!


云和恩墨创立于2011年,是业界领先的“智能的数据技术提供商”。公司总部位于北京,在国内外35个地区设有本地办公室并开展业务。

云和恩墨以“数据驱动,成就未来”为使命,致力于将创新的数据技术产品和解决方案带给全球的企业和组织,帮助客户构建安全、高效、敏捷且经济的数据环境,持续增强客户在数据洞察和决策上的竞争优势,实现数据驱动的业务创新和升级发展。

自成立以来,云和恩墨专注于数据技术领域,根据不断变化的市场需求,创新研发了系列软件产品,涵盖数据库、数据库存储、数据库云管和数据智能分析等领域。这些产品已经在集团型、大中型、高成长型客户以及行业云场景中得到广泛应用,证明了我们的技术和商业竞争力,展现了公司在数据技术端到端解决方案方面的优势。

在云化、数字化和智能化的时代背景下,云和恩墨始终以正和多赢为目标,感恩每一位客户和合作伙伴的信任与支持,“利他先行”,坚持投入于数据技术核心能力,为构建数据驱动的智能未来而不懈努力。

我们期待与您携手,共同探索数据力量,迎接智能未来。

c7abc9777881f23886e9b62ea454d8d8.gif


http://www.mrgr.cn/p/74386171

相关文章

12 c++版本的坦克大战

前言 呵呵 这大概是 大学里面的 c 贪吃蛇了吧 有一些 面向对象的理解, 但是不多 这里 具体的实现 就不赘述, 仅仅是 发一下代码 以及 具体的使用 坦克大战 #include<iostream> #include<windows.h> #include<conio.h> #include<ctime> #include…

HarmonyOS ArkUI实战开发—状态管理

一、状态管理 在声明式UI编程框架中&#xff0c;UI是程序状态的运行结果&#xff0c;用户构建了一个UI模型&#xff0c;其中应用的运行时的状态是参数。当参数改变时&#xff0c;UI作为返回结果&#xff0c;也将进行对应的改变。这些运行时的状态变化所带来的UI的重新渲染&…

计算机Windows系统优化小知识

本文涉及计算机Windows系统优化小知识,介绍了注册表、虚拟内存、常用优化工具目录目录什么是注册表优化优化工具什么是注册表注册表是保存所有系统设置数据的存储器。注册表保存了 Windows 运行所需的各种参数和设置,以及应用程序相关的所有信息。从 Windows启动开始,到用户…

CUDA和CUDNN版本切换

介绍了cuda和cudnn版本切换的方法,以及设置环境变量的坑0 背景 在用不同框架做深度学习时,难免会遇到需要不同版本的cuda和cudnn版本的情况,如果把原来版本的卸载掉重新安装新版本,则会影响其它框架的使用,最好的方法是在主机上安装多个版本的cuda和cudnn,需要用到哪种就…

用Python将原始边列表转换为邻接矩阵

&#x1f47d;发现宝藏 前些天发现了一个巨牛的人工智能学习网站&#xff0c;通俗易懂&#xff0c;风趣幽默&#xff0c;忍不住分享一下给大家。【点击进入巨牛的人工智能学习网站】。 在图论和网络分析中&#xff0c;图是一种非常重要的数据结构&#xff0c;它由节点&#xff…

计算机DIY之接驳线缆

介绍计算机DIY过程中接驳线缆相关知识,CPU供电、主板主供电、显卡供电、SATA供电、大4pin供电、主板接驳、前面板接驳目录目录 接驳线缆 CPU供电: 主板主供电 显卡供电 SATA供电 大4pin供电 主板接驳 前面板接驳接驳线缆电源插头里还有3条ATX电源专有的线,一条绿色线…

【继承和多态】

闭上眼睛&#xff0c;什么都不听.............................................................................................................. 文章目录 前言 一、【继承】 1.1【继承的概念】 1.2【 继承的定义】 1.2.1【定义格式】 1.2.2【继承关系和访问限定符】 1.2…

硬盘保存及维护基本常识

介绍硬盘使用寿命、硬盘供电、硬盘保存相关小知识点目录目录 硬盘使用寿命简介 硬盘供电简介 硬盘保存简介硬盘使用寿命简介硬盘在连续使用3-4年后就需要注意了(一般为质保期时间后一点), 5-6年后就需要更换硬盘了. 五年左右的时候留意更换机械硬盘,如果不是特备重要的数据,可…

使用restful请求华三模拟器上的设备接口数据

一、resful介绍 RESTful采用C/S模型。RESTful客户端为使用Python、Ruby或Java等编程语言开发出的RESTful客户端程序或脚本。RESTful服务器为网络设备。通过RESTful功能配置和维护设备的过程为: (1) 客户端向服务器发送HTTP/HTTPS请求报文,通过HTTP的方法来操作指定的REST…

芯科SiWx917学习笔记:1-测试Out of Box Demo

实验目的:测试Out of Box Demo 实验环境:Simplicity Studio V5 实验器材:Wireless Starter Kit Mainboard (BRD4002A Rev A06) + SiWG917 Single Band Wi-Fi and BLE 8MB Flash Radio Board (BRD4338A Rev A01) 实验开始: 1. 新建工程:在demos中找到Out of Box Demo(SoC) …

HTML批量文件上传方案——图像预览方式

作者:私语茶馆 1.HTML多文件上传的关键方案 多文件上传包括:文件有效性校验,文件预览、存储和进度展示多个方面,本章节介绍的是文件预览的实现方案。 2.文件上传前预览 2.1.效果 选择文件前: 选择文件后: 2.2.CSS文件代码 StorageCenter.css代码 html {font-family:…

牛客NC371 验证回文字符串(二)【简单 双指针 C++/Java/Go/PHP】

题目 题目链接&#xff1a; https://www.nowcoder.com/practice/130e1a9eb88942239b66e53ec6e53f51 思路 直接看答案&#xff0c;不难参考答案C class Solution {public:/*** 代码中的类名、方法名、参数名已经指定&#xff0c;请勿修改&#xff0c;直接返回方法规定的值即可…

合合信息:acge_text_embedding 文本向量化模型登顶 C-MTEB 中文榜单

近期&#xff0c;合合信息的 acge_text_embedding 文本向量化模型在最近的比赛中获得了 MTEB 中文榜单&#xff08;C-MTEB&#xff09;榜首&#xff01;C-MTEB 作为中文文本向量性能的评测标准&#xff0c;以其全面性和权威性在业内享有盛誉值得关注。接下来让我们仔细分析一下…

PID的嵌入式应用

PID 适用范围&#xff1a;二阶以内线性系统。 高阶系统并不适用&#xff0c;但是可以化为二阶系统。 非线性系统也不适用&#xff0c;可以通过其他方式化为线性系统。 优势&#xff1a;应用范围 95% &#xff0c;不需要对系统进行精细化建模&#xff0c;可以直接上 PID 。…

pwn知识——劫持tcache_perthread_struct(Ubuntu22.04之前)

前言(可忽略) 堆不愧是堆...知识点真的要多用动调查看堆的状态才好理解 tcache_perthread_struct的结构 源码 #define TCACHE_MAX_BINS 64 /* We overlay this structure on the user-data portion of a chunk whenthe chunk is stored in the per-thread cache. */ typedef…

最强AI直播换脸软件,DeepFaceLive下载介绍

DeepFaceLive是一款专注于直播实时换脸的AI软件,使用经过长时间训练的人脸模型替换摄像头中的人脸,能够产生接近电影质量的面部合成效果,提供高保真的视觉体验,在新版本中也支持了图片换脸(视频换脸只能预览,不能保存) DeepFaceLive在直播场景下的效果高度逼真,强大的…

stable-diffusion-webui安装与使用过程中的遇到的error合集

stable-diffusion-webui1.9.2踩坑安装 1. 安装过程1.1 stable-diffusion-webui1.2 在win11或win10系统安装&#xff0c;需修改两个启动脚本1.2.1 修改webui-user.bat1.2.2 修改webui.bat 1.3 双击 webui-user.bat 启动脚本1.3.1 no module xformers. Processing without on fre…

rabbitmq系列03---发布确认

一、发布确认逻辑 生产者将信道设置成 confirm 模式,一旦信道进入 confirm 模式,所有在该信道上面发布的消息都将会被指派一个唯一的 ID (从 1 开始),一旦消息被投递到所有匹配的队列之后,broker 就会发送一个确认给生产者 (包含消息的唯一 ID),这就使得生产者知道消息已经…

生成式AI原理技术详解(一)——神经网络与深度学习

本文主要介绍了生成式AI的最新发展&#xff0c;提到了GPT-5和AI软件工程师在行业中的影响&#xff0c;指出AI技术进步对国家竞争和个人职业发展的潜在影响。 未来已来 最近有两则新闻&#xff1a; sam altman自曝GPT-5细节&#xff0c;公开宣称GPT-5提升将非常大&#xff0c;任…

玩转手机在AidLux上安装宝塔面板

AidLux&#xff0c;手机不用刷机、不用root&#xff0c;直接在手机应用市场就能下载使用。 1.4G的应用包&#xff0c;看起来挺大的&#xff0c;那是因为内嵌了一套完整的AIoT应用开发和部署平台。 不仅Android手机可以玩&#xff0c;华为的Harmony系统也可以使用。 使用它最主…