联合评测 DapuStor Roealsen5 NVMe SSD在GreatSQL数据据库中的应用探索

万里开源的GreatSQL数据库在Dapu微电子的Roealsen5企业级SSD上进行性能测试,结果显示在各种InnoDBBufferPoolsize设置和并发情况下,Roealsen5相比友商产品展现出更高的QPS和更低的平均时延,尤其在混合读写场景中,性能显著增强,证明了GreatSQL与Roealsen5的优秀配合。

1、合作背景

万里开源软件有限公司

​ 北京万里开源软件有限公司,是专注于国产自主可控数据库产品研发超 20年的国家高新技术企业,参与多个国家级的数据库行业标准制定工作。本次用于测试的 GreatSQL 开源数据库是适用于金融级应用的国内自主 MySQL 版本,专注于提升 MGR 可靠性及性能,支持 InnoDB 并行查询等特性,可以作为 MySQL 或 Percona Server 的可选替换,用于线上生产环境,且完全免费并兼容 MySQL 或 Percona Server。

大普微电子科技有限公司

​ 深圳大普微电子科技有限公司(DapuStor),是国内领先的企业级 SSD 主控芯片设计、SSD 产品及存储方案定制专家。本次用于测试的 Roealsen5 企业级 SSD 基于自研控制器 DP600 和固件,搭载 KIOXIA 112层 3D Enterprise TLC,为客户提供业界领先的高性能、高可靠、低延时的 SSD,为企业 IT 及云设施提供更高能效和更优 TCO 的解决方案。DapuStor R5 产品广泛适用于企业IT、运营商、互联网、金融、智能制造、AI及大数据分析等行业的核心存储场景。

2、测试目的

此次测试的目的主要在于: 针对 GreatSQL 在 DapuStor Roealsen5 NVMe SSD(以下简Roealsen5)上的性能进行测试验证,并与S公司同规格的一款主流 NVMe SSD 做对比,检验 GreatSQL 在 Roealsen5 SSD 上运行是否能获得性能更佳、稳定性更强的效果。

3、测试用例设计

sysbench测试:

  • 数据库的 InnoDB Buffer Pool size 通常最高设置为物理内存的75%,但实际生产服务器实际内存大小存在差异,导致生产环境的 InnoDB Buffer Pool size 大小存在差异,并且理论上 InnoDB Buffer Pool size 设置的越小,会有更多的 IO 请求落到 SSD 上,可以通过设置不同的 InnoDB Buffer Pool size 的性能影响;
  • 针对数据库常用的数据模型分析,混合读写是数据库占比最多的应用场景;
  • Linux 系统上比较常用的文件系统为 ext4 和 xfs ;
  • 针对以上几点设计测试用例如下:
    • 文件系统格式:ext4 、xfs
    • 并发线程数:1、4、8、16、32、64、128
    • 测试事务模型:oltp_read_write(混合读写场景)
    • 数据量:64张表,每张表1250万行数据,约191G
    • InnoDB Buffer Pool size大小:48G、96G、144G、196G

4、测试详细数据

sysbench测试数据:

ext4文件系统:

图1:Roealsen5和友商在ibp=48G 混合读写场景QPS对比(越高越好)

图1:Roealsen5和友商在ibp=48G 混合读写场景QPS对比(越高越好)

图2:Roealsen5和友商在ibp=48G 混合读写场景平均时延对比(越低越好)

图2:Roealsen5和友商在ibp=48G 混合读写场景平均时延对比(越低越好)

图3: Roealsen5和友商在ibp=96G 混合读写场景QPS对比(越高越好)

图3: Roealsen5和友商在ibp=96G 混合读写场景QPS对比(越高越好)

图4:Roealsen5和友商在ibp=96G 混合读写场景平均时延对比(越低越好)

图4:Roealsen5和友商在ibp=96G 混合读写场景平均时延对比(越低越好)

图5:Roealsen5和友商在ibp=144G 混合读写场景QPS 对比(越高越好)

图5:Roealsen5和友商在ibp=144G 混合读写场景QPS 对比(越高越好)

图6:Roealsen5和友商在ibp=144G 混合读写场景平均时延对比(越低越好)

图6:Roealsen5和友商在ibp=144G 混合读写场景平均时延对比(越低越好)

图7:Roealsen5和友商在ibp=192G 混合读写场景QPS 对比(越高越好)

图7:Roealsen5和友商在ibp=192G 混合读写场景QPS 对比(越高越好)

图8: Roealsen5和友商在ibp=192G 混合读写场景平均时延对比(越低越好)

图8: Roealsen5和友商在ibp=192G 混合读写场景平均时延对比(越低越好)

Xfs文件系统:

图9:Roealsen5和友商在ibp=48G 混合读写场景QPS 对比(越高越好)

图9:Roealsen5和友商在ibp=48G 混合读写场景QPS 对比(越高越好)

图10:Roealsen5和友商在ibp=48G 混合读写场景平均时延对比(越低越好)

图10:Roealsen5和友商在ibp=48G 混合读写场景平均时延对比(越低越好)

图11:Roealsen5和友商在ibp=96G 混合读写场景QPS 对比(越高越好)

图11:Roealsen5和友商在ibp=96G 混合读写场景QPS 对比(越高越好)

图12:Roealsen5和友商在ibp=96G 混合读写场景平均时延对比(越低越好)

图12:Roealsen5和友商在ibp=96G 混合读写场景平均时延对比(越低越好)

图13:Roealsen5和友商在ibp=144G 混合读写场景QPS 对比(越高越好) 图13:Roealsen5和友商在ibp=144G 混合读写场景QPS 对比(越高越好)

图14:Roealsen5和友商在ibp=144G 混合读写场景平均时延对比(越低越好)

图14:Roealsen5和友商在ibp=144G 混合读写场景平均时延对比(越低越好)

图15:Roealsen5和友商在ibp=192G 混合读写场景QPS 对比(越高越好)

图15: Roealsen5和友商在ibp=192G 混合读写场景QPS 对比(越高越好)

图16:Roealsen5和友商在ibp=192G 混合读写场景平均时延对比(越低越好)

图16:Roealsen5和友商在ibp=192G 混合读写场景平均时延对比(越低越好)

5、测试结论

sysbench测试结论:

  • 数据库分别运行在 Roealsen5 和友商 NVMe SSD盘上,无论是ext4 还是 xfs 文件系统, InnoDB Buffer Pool size 是否充足, Roealsen5 作为GreatSQL数据盘的性能都优于友商 NVMe SSD。作为GreatSQL 数据盘, Roealsen5 会给用户带来更高的吞吐的同时带来更短的响应时延。

  • 在InnoDB Buffer Pool size 不足的情况下(分别为 48G、96G 时),对比1~128并发下 Roealsen5和友商 NVMe SSD 的 QPS 和平均时延, Roealsen5 的 QPS 有 9.7% ~ 126.7% 不等的提升,平均时延最多降低了 55.6%

  • 在 InnoDB Buffer Pool size 充足的情况下(分别为 144G、196G 时),对比 1~128 并发下 Roealsen5 和友商 NVMe SSD 的 QPS 和平均时延, Roealsen5 的 QPS 最多提升了40% 左右,平均时延最多降低了 40% 左右。

​ 从以上测试数据可以明显看出,GreatSQL 数据库搭载DapuStor Roealsen5 NVMe SSD 后,性能实现大幅提升,尤其在混合读写的场景,在增大数据的吞吐量的同时,大幅度降低时延,解决数据库的高效访问、方便共享等问题。 ​
​ 作为分别在数据库领域和数据存储领域的国内领先企业,万里数据库和 DapuStor 在本次合作的应用探索,希望能为用户带来更加流畅、高效的体验。未来,万里数据库将推动 GreatSQL 协同 DapuStor 探索更多基于 DapuStor Roealsen5 NVMe SSD 在数据库中的结合点和创新点,打造数据库+存储软硬一体化联合解决方案,为用户创造更多价值。


Enjoy GreatSQL :)

关于 GreatSQL

GreatSQL是由万里数据库维护的MySQL分支,专注于提升MGR可靠性及性能,支持InnoDB并行查询特性,是适用于金融级应用的MySQL分支版本。

相关链接: GreatSQL社区 Gitee GitHub Bilibili

GreatSQL社区:

社区博客有奖征稿详情:https://greatsql.cn/thread-100-1-1.html

image-20230105161905827

6440

内容概要:本文提出了一种基于非合作博弈理论的居民负荷分层调度模型,并结合双层鲸鱼优化算法(Two-level Whale Optimization Algorithm)进行高效求解,模型与算法均通过Matlab代码实现。研究针对电力系统中居民侧用电负荷的复杂调度问题,引入非合作博弈机制刻画各用户之间的利益竞争关系,实现负荷的分层优化分配;同时设计双层优化架构,上层优化资源配置,下层模拟用户自主决策行为,提升了模型的实用性与合理性。通过智能优化算法求解多层级、非凸非线性的博弈模型,有效提高了调度方案的收敛性与全局寻优能力,适用于现代智能电网中的需求侧管理与能源优化场景。; 适合人群:具备电力系统基础理论知识和Matlab编程能力,从事智能电网、能源优化调度、需求侧管理、博弈论应用等方向的科研人员、高校研究生及工程技术人员。; 使用场景及目标:①应用于居民区电力负荷的分层优化调度系统设计与仿真分析;②为非合作博弈在多主体能源系统建模中的应用提供方法论支持;③利用双层鲸鱼算法解决具有嵌套结构的复杂双层优化问题,提升求解效率与调度方案的可行性。; 阅读建议:建议读者结合提供的Matlab代码深入理解模型构建逻辑与算法实现流程,重点关注博弈模型的效用函数设计、纳什均衡求解思路以及双层优化结构的迭代机制,宜配合实际用电数据开展复现实验以验证模型有效性与鲁棒性。
内容概要:本文围绕基于自适应神经模糊推理系统(ANFIS)智能控制器的可再生能源微电网功率管理系统展开研究,结合Simulink仿真实现,深入探讨了微电网中功率的智能调控与经济机组组合调度问题。通过引入ANFIS控制器,有效应对风能、光伏等可再生能源出力的波动性与不确定性,提升系统运行的稳定性与电能质量。研究内容涵盖微电网多源协调控制策略、功率平衡管理、优化调度模型构建及仿真验证,实现了对分布式电源、储能系统和负荷的协同优化,兼顾经济性与可靠性目标,并通过仿真平台验证了所提方法的有效性与优越性。; 适合人群:具备电力系统、自动化或新能源相关专业背景,熟悉Matlab/Simulink仿真环境,从事微电网能量管理、智能控制、能源优化等领域研究的研究生、科研人员及工程技术人员。; 使用场景及目标:①用于高比例可再生能源接入场景下的微电网能量管理系统研发与教学实践;②为实现微电网功率稳定控制与经济高效运行提供先进的智能控制解决方案;③支撑高水平学术论文复现、科研课题攻关及实际工程项目的仿真验证与方案优化。; 阅读建议:建议结合提供的Simulink模型与相关代码进行动手实践,重点关注ANFIS控制器的设计流程、规则库构建与参数调优方法,并通过与传统PID或MPC控制策略的对比实验,深入理解其在动态响应与鲁棒性方面的优势。同时可进一步拓展文中提出的优化调度逻辑,应用于多目标、多约束的复杂实际应用场景中。
内容概要:本文档聚焦于“直流电机双闭环控制Matlab仿真”,系统阐述了基于Matlab/Simulink平台实现直流电机双闭环控制系统(主要包括速度环与电流环)的设计与仿真全过程。通过构建直流电机的数学模型,结合PI控制器进行调控,实现对电机转速和电枢电流的高精度动态控制,验证控制策略的稳定性与响应性能。文档详细介绍了仿真模型的搭建流程、关键参数的整定方法、系统动态波形的分析手段以及仿真结果的有效性验证,体现了经典自动控制理论在实际电机系统中的工程应用,是电机控制与电力电子技术相结合的典型研究案例。; 适合人群:具备自动控制原理、电机与拖动基础、电力电子技术和Matlab/Simulink仿真能力的电气工程、自动化、机电一体化等专业的本科生、研究生及从事电机驱动系统研发的工程技术人员。; 使用场景及目标:①作为高校课程设计或实验教学材料,帮助学生深入理解双闭环调速系统的工作机理与工程实现;②服务于科研项目,为新型电机控制算法(如滑模、模糊PID等)的开发与性能对比提供基础仿真验证平台;③作为工业界产品前期设计的仿真工具,用于评估不同控制策略在动态响应、抗干扰能力和稳态精度方面的可行性。; 阅读建议:建议读者在学习过程中紧密结合自动控制理论知识,亲手在Simulink环境中搭建完整的双闭环仿真模型,通过反复调整PI控制器的比例与积分参数,观察并分析转速、电流的阶跃响应曲线,从而深刻理解反馈控制的本质、系统稳定性条件以及参数整定对动态性能的影响,进而掌握电机控制系统的设计精髓。
内容概要:本文研究了基于Benders分解与输电网运营商(TSO)和配电网运营商(DSO)协调机制的不确定环境下输配电网双层优化模型,旨在提升高比例可再生能源接入背景下电网系统的协调性与鲁棒性。模型上层以系统整体经济性为目标进行优化调度,下层采用Benders分解实现TSO与DSO之间的信息交互与协同决策,通过引入割平面迭代机制保障求解的收敛性与全局最优性。研究充分考虑新能源出力与负荷需求的不确定性,构建了具有强适应性的双层优化框架,并基于Matlab完成了模型的编程实现与仿真验证,有效解决了多主体、多层级、多不确定性因素耦合下的电力系统优化调度难题。; 适合人群:具备电力系统分析、运筹学与优化理论基础,熟悉Matlab编程环境,从事智能电网、能源互联网、分布式能源集成、电力市场等方向的研究生、科研人员及工程技术人员。; 使用场景及目标:①研究高渗透率可再生能源条件下输配电网协同优化调度策略;②掌握Benders分解在电力系统双层优化建模中的应用方法与实现技巧;③构建TSO-DSO多主体协调机制,实现跨层级电网资源的高效互动与决策解耦;④提升对不确定性建模、分解算法设计及大规模优化问题求解能力。; 阅读建议:建议读者结合Matlab代码逐模块剖析模型构建流程,重点理解Benders割的生成逻辑、主从问题的信息传递机制及收敛判据设定,推荐在标准IEEE测试系统上复现实验以深入掌握模型特性与算法性能。
内容概要:本文系统研究了基于灰狼优化算法(GWO)优化Elman神经网络的方法,并提供了完整的Matlab代码实现。研究重点在于利用灰狼优化算法强大的全局搜索能力,对Elman神经网络的关键参数进行智能优化,从而克服传统训练方法易陷入局部最优的缺陷,显著提升模型在时序预测与非线性系统建模任务中的精度与稳定性。文章详细阐述了Elman网络的动态反馈机制及其在处理时间序列数据方面的优势,构建了GWO与Elman相结合的混合预测框架,涵盖了从模型搭建、参数寻优、仿真测试到结果分析的全流程,特别适用于风电功率预测、电力负荷预测等具有强时变性和不确定性的工程应用场景。; 适合人群:具备一定Matlab编程能力和神经网络基础知识,从事智能优化算法、时间序列预测、电力系统分析或新能源出力预测等相关领域的研究生、科研人员及工程技术人员。; 使用场景及目标:①掌握灰狼优化算法在神经网络超参数优化中的具体实施路径与技术细节;②深入理解Elman递归神经网络与群体智能优化算法融合的建模范式;③将其应用于风电、光伏等新能源发电功率预测及复杂动态系统的建模与仿真,提升预测性能。; 阅读建议:建议读者结合所提供的Matlab代码进行动手实践,重点关注GWO算法与Elman网络的接口设计、适应度函数构建及参数优化迭代过程,可通过调整数据集或迁移至其他预测场景以深化理解和验证模型泛化能力。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值