尧图网络 高端网站定制 · 原创设计
免费咨询热线
400-888-6620
免费获取方案
其实以前也会有陆续的用户反馈不减少,
才让我们重视了起来。我们前端一共三款产品app、官网、H5其中app使用量最大官网其次H5平时使用量极少但是做活动期间流量会暴增活动一般都是H5游戏居多H5也便于推广营销,前端的三款产品都是分别使用lvs负载到后端的两台web服务器中如下图这次用户反馈基本在web和app端所以重点观察这四台服务器。首先怀疑网络带宽是否被涌满找到网络工程师通过工具来监控在抢标的时候带宽最高使用率只有70%左右随排除之再次怀疑web服务器是否抗不住了使用top命令查看官网负载的两台服务器在抢标的瞬间会飙到6-8左右抢标后也慢慢的恢复了正常app两台服务器高峰到10-12随后也恢复正常。跟踪web服务器业务日志发现在数据库更新层报请求不到新的数据库连接或者数据库连接已经用完认为是数据库的最大连接数太小于是调整mysql数据库最大连接数为以往的3倍下次抢标的时候继续观察业务日志发现已经不报数据库链接的相关错误了但还是很多用户反馈抢标时候打不开页面。继续跟踪web服务器在抢标时使用命令ps -ef|grep httpd|wc -l查看httpd得连接数有1千左右随机查看apache配置文件中设置的最大连接数为1024apache默认的最大连接数为256原来抢标期间连接数已经到达最大连接数很多用户在抢标的过程中已经获取不到http连接导致页面无响应或者app一直在等待中。于是调整apache配置文件中的最大连接数为1024*3。在抢标过程中继续观察apache的连接数在抢标的时候仍然可以飙到2600-2800之间根据客服反馈仍然有很多用户反馈抢标的问题但比之前稍微好一点但是有零星的用户反馈已经抢到标的最后又给回退了。然后继续观察数据库服务器使用top命令和MySQLWorkbench查看mysql主库和从库的各项负载吓一跳如下图mysql服务器主库的各项指标均已经达到峰值而从库几乎没有太大压力。跟踪代码发现三端的业务代码全部连接主库从库只有后台的查询业务在使用于是立刻启动改造将除过抢标过程中的查询外其它页面或者业务的所有查询改造为查询从库改造之后观察发现主库的压力明显减少从库的压力开始上来了。如下图根据客服的反馈改造之后抢到标回退的问题几乎没有了抢标过程中页面打不开或者打开慢的问题有一定的缓解但仍有部分用户反馈此问题根据上面各项目分析结果得出1 负载的两台服务器均已经达到处理的极限需要配置更多的服务器来负载。2 mysql主库的压力明显减少但是从库的压力却上去了需要将现在的一主一从已从改为一主多从的模式。3 彻底解决这些问题需要综合考虑平台的整体优化如业务优化去掉业务中热点、增加缓存、部分页面静态化可以使用雅虎和谷歌的前端优化规则网上也有很多的测试网站可以评测等等。当时根据这些情况写了一份优化的报告,见下文## 优化报告1 背景随着公司业务不断发展业务量和用户量的激增官网pv也从最初的xxx-xxx到现在的xxx-xxxxAPP活跃用户更是大幅增加因此也对平台目前的技术架构有了更大的挑战。特别是近期平台标源紧张的情况下满标的时间更是越来越短。服务器的压力也越来越大因此需要升级目前的系统架构以支持更大的用户量和业务量。2 用户访问示意图目前平台有三款产品面对用户平台官网、平台APP、平台小网页其中平台官网和平台APP的压力比较大。3 存在的问题用户抢标的时候问题集中在以下几个方面1、网页或者APP打不开2、网站或者APP打开慢3、抢标过程中转账成功后因为服务器负责压力大更新失败再次退款4、数据库连接数用完导致满标后添加投资记录失败回退标的进度4、分析通过对近期的服务器参数并发量以及系统日志等进行深入的分析得出1、平台官网、平台APP抢标过程中服务器压力巨大其中平台APP问题更加突出抢标高峰期间单台APP服务器apache最大连接数已经接近2600接近apache最大的处理能力2、数据库服务器压力巨大。数据库压力主要在两个时期比较突出1当平台做活动的时候官网、小网页、APP访问量巨增导致数据查询量跟着巨增当到达数据库处理极限时就会表现出网站打开慢等问题2当用户抢标的时候用户抢标的压力又分为两个阶段抢标前和抢标中。抢标前因为满标速度很快用户提前打开抢标页面不断刷新这样数据库的查询压力会不断增大如果抢标的用户量非常大会导致在抢标之前将数据库连接数用完抢标中单次购买大概会涉及15张左右表进行更改查询每个标的份额1000万大概每次会有100-200人左右购买完成满标以中间值150人计算在几秒的时间内需要对数据更新2000-3000次(仅仅是更新不包括查询 )产生大量并发可能会导致更新失败或者连接超时从而影响到用户投标和系统正常满标。5 解决方案1、web服务器解决方案单个用户访问web服务的示意图目前网站和平台APP均是采用了两台服务来做均衡负责每台服务器中安装了apache来做服务端接受处理每台apache最大可以处理大约2000条连接。因此理论上目前网站或者APP可以处理大于4000个用户请求。如果要支持同时1万的请求则需要5台apache服务器来支持,因此目前缺少6台web服务器。升级服务器后的访问示意图2、数据库解决方案当前数据库的部署方案1)主从分离解决主库80%的查询压力。目前平台官网、APP均连接mysql主库导致主库压力倍增把服务中的查询全部迁移到从数据库可以大量减轻主库的压力。2)增加缓存服务器。当从库查询到达峰值的时候也会影响主从的同步从而影响交易因此对用户经常使用的查询进行缓存以达到减少数据库的请求压力。需要新增三台缓存服务器搭建redis集群。3、其它优化1官网首页静态化从cnzz统计来分析首页占比网站的整体访问量的15%左右对于首页不经常变动的数据通过静态化来处理提升官网打开的流畅度。2apache服务器的优化开启gzip压缩配置合理的链接数等去掉投资过程中的更新热点标的进度表。每次投标成功或者失败都需要对标的进度表进行更新多线程更新的时候就会出现乐观锁等问题。去掉过程中的更新只在满标后将标的进度信息保存在标的进度表优化投资过程中对数据库的压力。6 服务器升级方案
RELATED

相关推荐

35岁转行AI大模型:挑战、机遇与实战路径

35岁转行AI大模型:挑战、机遇与实战路径

1. 35岁转行AI大模型的现实挑战与机遇去年我在技术社区遇到一位36岁的机械工程师王磊,他用了14个月系统学习AI大模型开发,现在已成功加入某智能客服创业团队。这个案例让我意识到:年龄和零基础从来不是转行的绝对障碍,关键在于方法…

📅 2026/10/2 16:10:55
一个由进程内存布局异常引起的问题

一个由进程内存布局异常引起的问题

前段时间业务反映某类服务器上更新了 bash 之后,ssh 连上去偶发登陆失败,客户端吐出错误信息如下所示: 图 - 0 该版本 bash 为部门这边所定制,但是实现上与原生版并没有不同,那么这些错误从哪里来? 是 …

📅 2026/10/5 4:55:12
】[Ceiling节点]原理解析与实际应用

】[Ceiling节点]原理解析与实际应用

ing节点在Shader Graph中属于数学运算类别,它接受任意维度的矢量输入,并返回相同维度的矢量输出。这意味着它可以处理从单个浮点数到四维矢量的各种数据类型,为着色器开发提供了极大的灵活性。理解Ceiling节点的工作原理和应用场景对于创建高…

📅 2026/10/2 11:11:24
MORE NEWS

更多资讯

📰

企业知识库问答Agent:RAG+MCP+多模态架构实战指南

1. 项目概述:为什么企业知识库问答 Agent 不再是“锦上添花”,而是业务运转的“神经末梢”你有没有遇到过这样的场景:销售同事在客户现场被突然问到某个三年前发布的某款设备的兼容性参数,翻遍内部Wiki、邮件归档、甚至翻出2021年…

📰

基于Python深度学习的GFPGAN图片修复:从源码到实战

简介:本资源为基于Python深度学习框架的GFPGAN图片修复算法实现源码,面向具备一定Python编程与深度学习基础、关注图像修复与生成对抗网络应用的开发者与研究者,可用于老旧照片修复、面部图像增强及数字取证等场景。压缩包共62个文件&#xf…

📰

GPU推理并发上限计算器:从物理瓶颈到工程落地

1. 这不是“算力玄学”,而是一道可拆解的工程题你刷到过那种标题:“8张GPU到底能跑多少并发?”——点进去,要么是云厂商的模糊话术,要么是博主拍脑袋报个数字,再附一句“看显存、看模型、看batch size”。但…

📰

单文件AI编码代理:融合GUI操控与MCP协议的自动化利器

1. 一个念头:为什么会有这个单文件AI编码代理1.1 从“聊天机器人”到“干活机器人”我过去半年一直在折腾AI编码代理这类东西。市面上的方案不少,但大多数用起来都有一个共同的毛病:装起来太折腾。有的要配Python虚拟环境,有的要拉…

📰

AI Agent治理:防止企业数据泄露的四大缺口与落地实践

1. AI Agent 凭什么成了企业"下一个主要泄露来源"?先把它拆开看Agent 这种东西,过去一年在企业里铺开的速度比我预想得快得多。年初我还在帮几家中大型客户评估他们准备上线的 AI Agent 方案,到了年中,不少团队已经不管…

📰

FPGA定点牛顿-拉夫逊除法器:Verilog手写高吞吐除法实现

1. 这不是普通除法器:为什么牛顿-拉夫逊在FPGA里值得手搓你打开EDA工具,敲下/运算符,综合器默默给你生成一个串行移位加减的除法器——时序路径长、吞吐量低、资源占用高,仿真跑十万个周期才出一个结果。这在数字信号处理、实时控…

TODAY

今日更新

THIS WEEK

本周精选

THIS MONTH

本月热门

读完文章,想聊聊您的网站?

告诉我们您的行业与需求,资深顾问一对一梳理方案与报价,全程免费。

📞 💬