四川 成都 SANGFOR 刷新纪录!华锐AMQ在深信服信创超融合上的极限表现 科汇科技 群晖 深信服 分销商 授权代理商 IT服务商 塔式服务器 网络存储服务器 火绒 终端安全 企业级杀毒

本期焦点

金融行业的信创升级正逐步深化,已从最初的周边系统替换,发展至对关键及核心业务系统的全面替代。在这一过程中,分布式架构成为构建关键核心业务系统的首选。而消息队列(MQ)中间件作为这一架构中的基础平台,对于实现业务系统的解耦和模块化拆分,发挥着至关重要的作用。

用户将X86平台下的MQ移植到信创平台下,性能表现如何?近期,深信服携手华锐技术完成了采用深信服信创超融合承载华锐AMQ分布式低时延消息中间件的兼容、可靠性验证,本文将分享相关的测试结果与调优思路,为金融用户在选型中提供参考。

华锐技术是分布式基础软件公司和证券资管行业核心业务平台提供商,自主研发的分布式架构下低时延消息队列产品AMQ,功能对标IBM MQ、Active MQ、Rocket MQ和Kafka等队列产品,并在可用性、可靠性、性能和灵活性方面都有明显提升,广泛的应用在银行、证券、基金等关键行业的核心场景。

Part.1业务系统介绍

消息队列MQ(Message Queue)正成为企业IT系统通信的核心,以其低耦合性、可靠的消息传递、广播能力、流量控制和确保最终数据一致性的特点,支持异步RPC通信。它由生产者创建消息,消息服务端负责存储和分发,消费者则接收并根据消息执行业务逻辑,共同构成了消息队列的基本运作流程。

除以上三个核心组件外,华锐AMQ产品提供控制管理中心(Domainserver)。该中心统一管理多套消息服务器集群,负责系统的配置、监控和系统运维。

MQ的典型应用场景主要有三个:

1. 流量削峰:在高峰期将流量限制在系统可承受的范围内,避免因为突发的大量请求导致系统崩溃。

2. 应用解耦:将系统中的不同模块解耦,使得可以独立地进行开发、部署和升级

3. 异步处理:主要应用于实时性要求不严格的场景,发送方将消息发送到队列后即可继续执行其他任务,而不需要等待接收方的即时响应。这种异步通信方式提高了系统的响应速度和吞吐量,使得系统能够更好地处理大量并发请求。

Part.2测试环境介绍
1.AMQ应用集群部署环境

本次测试采用Master – Slave 主从同步部署,生产者将消息写入到 Master 节点,Master 会同步数据到 Slave 形成副本,如果有多个消费者就可以去不同的节点进行消费。

2.AMQ虚拟机资源配置

虚拟机MQ_1部署Producer和Consumer以及压测软件,虚拟机MQ_2和MQ_3部署AMQ Master和Slave集群软件。

3.超融合服务器资源配置

超融合服务器采用标准部署架构,架构图及软硬件配置如下:

4.X86裸金属资源配置

采用2台物理服务器,主从架构部署AMQ 集群,配置为CPU Intel Xeon Gold 6132@2.60GHz + Intel Xeon Gold 6246@3.40GHz,以及1台压测机进行压测。

Part.3测试方法介绍

部署三台鲲鹏服务器。

在鲲鹏服务器01上,开通一台虚拟化服务器,启动生产者(Producer)和消费者(Consumer)进程,并运行AMQ_Perf工具,构建压测机。

在鲲鹏服务器02和03上,各开通一台虚拟化服务器,部署AMQ集群,并且在AMQ集群开启持久化。通过AMQ_Perf工具可以实现生产者(Producer)不同速率下消息发送,以及统计消费者(Consumer)接收不同消息发送速率下的时延结果、吞吐量。

主要测试不同TPS压力下的响应时间&时延。响应时间即完成一次事务所需要的时间。一般从AVG、PCT90、PCT95、PCT99(PCT99可以简称P99)等多个维度去看。我们主要关注AVG和PCT99两个指标,其中AVG指标为P50\P90\P95\P99平均值。

AVG指标:

表示平均时延(Latency),通常用于衡量消息处理的平均时间,包括消息从生产者发送到消费者接收并处理的整个过程。消息处理的平均时间是衡量MQ性能的重要指标,因为它直接影响到消息的延迟和系统的响应时间。一个较低的平均处理时间,意味着系统能够更快地处理消息,从而提高整体的吞吐率和效率。

PCT指标:

在MQ中间件中,PCT通常用于衡量消息处理时间的分布情况,可以反映消息队列在保证消息可靠传递方面的表现。例如,P95、P99等表示95%或99%的消息处理时间低于某个值。这种指标有助于识别系统中的异常情况和性能瓶颈。通过分析PCT,可以了解大多数消息的处理时间以及少数消息的延迟情况,从而优化系统配置和资源分配,确保系统的高可用性和稳定性

值得一提的是,全链路时延统计的方法是将生产者(Producer)和消费者(Consumer)部署在同一虚拟机中,通过生产者(Producer)产生消息信息,发送到AMQ集群,消费者(Consumer)获取消息信息,即记录一次时延,从而获取批量发送不同数据包场景下的时延情况。时延=消费者(Consumer)获取到时间 – 生产者(Producer)产生消息时间。

通过AVG和P99指标数据,以便更客观评价华锐AMQ在深信服信创超融合平台上的性能表现。

Part.4测试内容介绍

本次测试的内容主要通过以下场景进行测试和对比,获取不同TPS下,AVG和PCT99:

场景一:测试在X86裸金属运行RedHat系统下,AMQ的AVG和PCT99数据表现。

场景二:测试在未对超融合平台进行优化情况下,采用深信服信创超融合平台,创建麒麟虚拟机运行AMQ的AVG和PCT99数据表现。

场景三:测试在对超融合平台进行调优情况下,采用深信服信创超融合平台,创建麒麟虚拟机运行AMQ的AVG和PCT99数据表现。

通过以上三个场景的对比,可直观地查看在采用深信服信创超融合平台与X86裸金属架构下,承载AMQ产品在小规模TPS,中等规模TPS,以及极限45W TPS规模下的性能表现。

Part.5测试结果介绍

从测试场景一的X86裸金属架构测试结果中可以看出,45W消息速率下,已经达到了极限速率,此时p99的波动变大,出现X86服务器由于波动造成时延更高的情况。

从测试场景二的采用深信服信创超融合(未调优)的测试结果中可以看出,在未调优的情况下,高压力超过15W TPS的P99响应时间波动大,时延达到秒级,不满足使用要求,在超过15W TPS情况下未记录数据。

从测试场景三的采用深信服信创超融合平台(调优)的测试结果中可以看出,调优之后,高压力超过15W TPS的P99响应时间波动小。

Part.6效果对比

将X86裸金属架构下的avg(us)和深信服信创超融合对比:

TPS在小于20W小压力场景下,深信服信创超融合性能略低于X86裸金属架构。

TPS在20W到35W之间,深信服信创超融合比X86裸金属架构性能提升10%。

TPS在45W高压力的场景下,深信服信创超融合比X86裸金属架构性能提升37%。

通过将X86裸金属架构下的P99(us)和深信服信创超融合对比:

TPS在性能极限45W以下,低于X86裸金属架构性能30%。

TPS在45W,深信服信创超融合比X86裸金属性能提升20%。

出现上述结果原因是,AMQ使用单核轮询的方式去处理消息,依赖于CPU的单核性能,而ARM的单核性能通常比X86服务器要差,所以avg时延会略微高于X86。

p99统计的是消息中时延最高的那一部分,这一部分通常是由于消息得不到CPU的及时处理导致了时延增加,对于单核性能的差距更加敏感。

从avg和P99指标来看,当TPS的压力越大,如avg的指标在大于35W时,P99的指标在极限45W时,深信服信创超融合平台性能会优于X86裸金属架构。在高压力场景下,深信服对超融合平台和虚拟机进行调优设置,保障资源能够得到有效的处理,调优手段如下:

1.鲲鹏服务器的硬件设置调整:

对于鲲鹏服务器的调整修改BIOS设置(参考鲲鹏最佳实践文档)、电源策略修改为性能模式、内存刷新速率改为自动以提升服务器的处理能力。

2.对于超融合平台调整:

由于AMQ性能参考为延时,主要主要聚焦在网络的调整,包括aNet网络的转发核心调整到四核提升网络吞吐、网络转发核位置调整到numa0,与网卡所在的numa一致(降低内存时延,消除网卡跨numa的开销);开启物理网卡切分,虚拟机使用直通的VF网卡。

3.超融合虚拟机设置调整:

聚焦在CPU的调度、CPU预留、将AMQ标记为重要虚拟机保证性能,开启虚拟机网络亲和;其中CPU预留和标记重要虚拟机,保证在性能抢占情况下资源分配,以提升性能。

Part.7联合测试结论

对比华锐AMQ行业内的最佳实践“30W TPS情况下的平均时延小于100us”,华锐AMQ与深信服信创超融合的性能联合调优测试表现,高于华锐AMQ的参考值水平。

在深信服信创超融合和X86性能对比中,深信服信创超融合得益于对平台调优,压力越大性能表现越好,尤其在极限45W TPS场景下,avg性能为29us,P99性能表现为85us,能够满足生产的场景的需求。

云朋友 实干派是深信服打造的一档生态伙伴技术内容专栏,将定期为大家推送合作伙伴性能调优相关的技术解析、场景实践等内容,为大家深度解析深信服在云计算领域的创新能力、技术动态、场景应用及前瞻分析。

新型智慧城市解决方案,政务数据中心建设方案 政务专网建设解决方案,互联网安全优化方案 政务移动安全接入方案,业务全网等级保护三级整改建设案例 业务内网等级保护三级整改建设案例,电子政务专网应用加速及传输优化解决方案,政府信息中心上网行为管理解决方案,深信服防火墙、深信服VPN、深信服上网行为管理、深信服态势感知、深信服等保一体机,深信服四川总代理 深信服经销商 深信服的渠道有哪些,深信服渠道代理商有哪些,深信服代理商有哪些,深信服成都研发中心,深信服总代理,深信服成都代理商有哪些,深信服代理,成都深信服科技有限公司,企业办公无线解决方案 电子商务网站优化解决方案,企业办公桌面云解决方案 数字校园解决方案,桌面云解决方案 数字图书馆解决方案,业务与支撑系统安全 随势而变的ICT,云资源池安全与优化 广电网络解决方案,网络安全等级保护(等保2.0)解决方案,等保一体机解决方案 云安全解决方案 云产品HCI超融合一体机
深信服四川总代, 深信服四川办事处联系电话, 深信服四川总代理商, 深信服四川办, 深信服四川办事处, 深信服四川绵阳 ,深信服四川运营, 深信服成都,深信服成都分公司
产品方向:
安全类
云镜YJ 下一代防火墙NGAF 上网行为管理AC SSL VPN 终端检测响应EDR 合规类产品 EMM 安全感知平台 XSEC WEB应用防火墙WAF 云眼/云盾 /云图 上网安全服务平台ISSP 等级保护 安全服务
云计算类
超融合 HCI 超融合云管平台aCMP 监控中心aMC 涉密虚拟化sCloud 深信服AICP算力平台
基础架构类
桌面云aDesk 应用交付AD SDWAN-WOC SDWAN-MIG 集中管理平台SC&BBC SDWAN-aBOS SD-WAN 企业级分布式存储EDS SDW-R, 深信服成都分公司,深信服成都研发中心, 深信服成都公司怎么样,深信服成都办事处,深信服成都办事处地址,深信服成都防火墙, 深信服成都总代
产品:国行原装, 深信服科技官网,深信服续费,深信服维修,深信服升级,深信服过保
深信服官网:sangfor.com , 深信服科技官网
产品分类:
方向企业级安全,边界安全 下一代防火墙AF,云安全 信服云盾 信服云眼,重构入云业务安全边界 威胁检测 安全感知平台SIP,安全解决方,网络安全等级保护(等保2.0)解决方案 云安全解决方案,网端云敏捷安全架构,终端安全,终端检测响应平台EDR 企业移动管理EMM,身份与访问安全上网行为管理AC SSL VPN 硬件VPN EasyConnect,,SSL VPN新版本443端口未授权RCE,行为感知系统BA,安全审计与运营,数据库安全审计DAS,云计算,企业级云aCloud 超融合aCloud,新型智慧城市解决方案 服务器虚拟化,云管平台aCMP 大数据智能平台, 深信服上网行为管理系统,深信服上网行为管理设备,深信服上网行为管理软件,超融合软件 超融合一体机,桌面云aDesk 应用交付AD, 软件定义统一存储系统EDS, 一体化网关MIG 广域网优化WOC 安全SD-WAN2.0, 深信服EDS存储
深信服总代理(深信服经销商/深信服代理商):
四川深信服:德阳深信服 绵阳深信服,攀枝花深信服,西昌深信服,雅安深信服,内江深信服,资阳深信服,南充深信服,眉山深信服,乐山深信服,自贡深信服 泸州深信服 广元深信服 遂宁深信服 宜宾深信服 广安深信服 达州深信服 雅安深信服 巴中深信服 资阳深信服 攀枝花深信服 凉山彝族自治州深信服 甘孜藏族自治州深信服 阿坝藏族羌族自治州深信服, 深信服 四川 代理 深信服代理商有哪些, 深信服成都分公司 ,深信服成都 深信服代理服务器维修,深信服总代, 成都深信服科技有限公司,深信服公司介绍,深信服科技股份有限公司,深信服子公司。深信服 四川代理商,深信服有多少家代理商, 深信服成都分公司,深信服渠道代理商有哪些,深信服成都,成都深信服科技有限公, 深信服公司,深信服代理服务器,深信服子公司,深信服科技股份有限公司地址
深信服 网上关键词摘选如下:
深信服成都渠道代理商有哪些;深信服渠道代理商有哪些;深信服nat代理上网;深信服代理商资质查询;深信服总代怎么样;深信服的渠道有哪些;深信服代理;深信服成都经销商;深信服四川经销商;深信服代理商;深信服 成都深信服科技有限公司 深信服科技成都分公司 深信服成都区主管是谁 深信服成都 深信服成都办事处 深信服成都网络安全 深信服成都代理商有哪些 深信服成都防火墙 维修,深信服四川总代,深信服四川办事处联系电话,深信服四川总代理商,深信服四川办,深信服四川办事处,深信服四川绵阳 深信服四川运营,深信服四川,深信服成都,深信服成都分公司
深信服 防火墙 上网行为管理 具体型号:
深信服 AC-1000-B1200 上网行为管理;AC-1000-B1100,ac-1700,ac-1220,af-1000-c600,ac-1000-c400,af-1210,ac-1220. 深信服url系统软件,5017007367-ae1a3768, 5039503294-c5b6833e, 5019000369-03e902e4, 深信服 AC-1000-A400 深信服 AF-1520 深信服 AC-1000-B400,深信服 AC-1000-C600 深信服 NGAF-1000-D420,深信服 VPN-2050 深信服防火墙NGAF-1000 深信服 AC-1400,深信服 AF-1300 深信服 NGAF-1000-D440 深信服 AC-1000-D600 深信服 NGAF-1020深信服 NGAF-1120 深信服 AC-1700 深信服 VPN-2150 深信服 VPN-1100 深信服 AF-2000-FH2350A ,af-2000-fn2130, 深信服 AF-1000-B1510 深信服 VPN-1000-B1200-1K 深信服 AC-1000-B1400 深信服 AD-1000-B1200,AC-1000-SK1500,日志审计: SIP-Logger-A600,堡垒机: OSM-1000-B1150
深信服 云镜安全风险评估系统 YJ-1000-VE
深信服 EDR 杀毒软件,EDR(深信服终端安全管理系统软件V3.0)
深信服VPN-6050,深信服 AC-1000-A200 深信服 AC-1000-A300,深信服 NGAF-1000-B400 深信服 防火墙 NGAF-1020,深信服SANGFOR AC-550 深信服 AC-1000-B400,Sangfor WOC-1000-B1050,深信服 NGAF-1000-E800 防火墙 深信服AF-1800,深信服 VPN-1000-I440 深信服VPN网关 VPN-1000-I440,深信服VPN网关管理软件V7.0 , 深信服短信模块软件V2.0,深信服EMM企业 移动管理软件 V2.0 深信服SSL VPN授权软件 V6.0,,适用于1001-2000个授权使用 深信服AF-3020,深信服多线路系统软件V1.0 深信服网关杀毒软件V6.0,深信服AD-1000-G642 深信服应用交付网关,深信服应用交付软件V7.0,深信服EDC存储,深信服 零信任综合网关 PN:aTrust-1000-B1030M-HK
超融合一体机 aServer-R-2205
虚拟化产品:VDS-R-7550,vpn-2050
深信服下一代防火墙:
深信服 FW-100-BN150 防火墙,WOC-1000-B1200-B8(深信服WOC安全网关),深信服WOC安全网关软件V9.0,智能DNS服务器,MYD-2500,超融合一体机,SDW-R-B1100D,af-1000-b1510,(深信服 防火墙),下一代防火墙: AF-1000 AF-1000-FH1800A-U9
上网行为管理,ac1520,深信服 AF-1000-B1810,深信服续费,深信服维修,深信服重启,深信服过保,深信服升级,深信服过期,深信服四川总代理,深信服四川办事处联系电话,深信服四川总代理商,深信服四川办,深信服四川办事处,深信服四川绵阳,深信服四川运营,深信服四川,深信服成都,深信服成都分公司
深信服 漏洞扫描YJ-1000-B1075-BU 磁盘阵列
信锐ap ,xap-5520-e,深信服终端安全管理系统V3.0,
存储:EDS存储
深信服维修(sanfor维修),以及更多产品和详情请咨询:
成都科汇科技有限公司 — 专业企业级安全、云计算与IT基础架构服务商
无论您是解决企业级安全、云计算,还是IT基础架构,都可以使您的IT更简单、更安全、更有价值
成都科汇科技有限公司( 安全产品 解决方案提供商 )
地址:成都市人民南路四段1号时代数码大厦18F
联系电话:400-028-1235
手机:180 8195 0517(微信同号)

 

 

在线客服系统