尧图网络 高端网站定制 · 原创设计
免费咨询热线
400-888-6620
免费获取方案
其实以前也会有陆续的用户反馈不减少,
才让我们重视了起来。我们前端一共三款产品app、官网、H5其中app使用量最大官网其次H5平时使用量极少但是做活动期间流量会暴增活动一般都是H5游戏居多H5也便于推广营销,前端的三款产品都是分别使用lvs负载到后端的两台web服务器中如下图这次用户反馈基本在web和app端所以重点观察这四台服务器。首先怀疑网络带宽是否被涌满找到网络工程师通过工具来监控在抢标的时候带宽最高使用率只有70%左右随排除之再次怀疑web服务器是否抗不住了使用top命令查看官网负载的两台服务器在抢标的瞬间会飙到6-8左右抢标后也慢慢的恢复了正常app两台服务器高峰到10-12随后也恢复正常。跟踪web服务器业务日志发现在数据库更新层报请求不到新的数据库连接或者数据库连接已经用完认为是数据库的最大连接数太小于是调整mysql数据库最大连接数为以往的3倍下次抢标的时候继续观察业务日志发现已经不报数据库链接的相关错误了但还是很多用户反馈抢标时候打不开页面。继续跟踪web服务器在抢标时使用命令ps -ef|grep httpd|wc -l查看httpd得连接数有1千左右随机查看apache配置文件中设置的最大连接数为1024apache默认的最大连接数为256原来抢标期间连接数已经到达最大连接数很多用户在抢标的过程中已经获取不到http连接导致页面无响应或者app一直在等待中。于是调整apache配置文件中的最大连接数为1024*3。在抢标过程中继续观察apache的连接数在抢标的时候仍然可以飙到2600-2800之间根据客服反馈仍然有很多用户反馈抢标的问题但比之前稍微好一点但是有零星的用户反馈已经抢到标的最后又给回退了。然后继续观察数据库服务器使用top命令和MySQLWorkbench查看mysql主库和从库的各项负载吓一跳如下图mysql服务器主库的各项指标均已经达到峰值而从库几乎没有太大压力。跟踪代码发现三端的业务代码全部连接主库从库只有后台的查询业务在使用于是立刻启动改造将除过抢标过程中的查询外其它页面或者业务的所有查询改造为查询从库改造之后观察发现主库的压力明显减少从库的压力开始上来了。如下图根据客服的反馈改造之后抢到标回退的问题几乎没有了抢标过程中页面打不开或者打开慢的问题有一定的缓解但仍有部分用户反馈此问题根据上面各项目分析结果得出1 负载的两台服务器均已经达到处理的极限需要配置更多的服务器来负载。2 mysql主库的压力明显减少但是从库的压力却上去了需要将现在的一主一从已从改为一主多从的模式。3 彻底解决这些问题需要综合考虑平台的整体优化如业务优化去掉业务中热点、增加缓存、部分页面静态化可以使用雅虎和谷歌的前端优化规则网上也有很多的测试网站可以评测等等。当时根据这些情况写了一份优化的报告,见下文## 优化报告1 背景随着公司业务不断发展业务量和用户量的激增官网pv也从最初的xxx-xxx到现在的xxx-xxxxAPP活跃用户更是大幅增加因此也对平台目前的技术架构有了更大的挑战。特别是近期平台标源紧张的情况下满标的时间更是越来越短。服务器的压力也越来越大因此需要升级目前的系统架构以支持更大的用户量和业务量。2 用户访问示意图目前平台有三款产品面对用户平台官网、平台APP、平台小网页其中平台官网和平台APP的压力比较大。3 存在的问题用户抢标的时候问题集中在以下几个方面1、网页或者APP打不开2、网站或者APP打开慢3、抢标过程中转账成功后因为服务器负责压力大更新失败再次退款4、数据库连接数用完导致满标后添加投资记录失败回退标的进度4、分析通过对近期的服务器参数并发量以及系统日志等进行深入的分析得出1、平台官网、平台APP抢标过程中服务器压力巨大其中平台APP问题更加突出抢标高峰期间单台APP服务器apache最大连接数已经接近2600接近apache最大的处理能力2、数据库服务器压力巨大。数据库压力主要在两个时期比较突出1当平台做活动的时候官网、小网页、APP访问量巨增导致数据查询量跟着巨增当到达数据库处理极限时就会表现出网站打开慢等问题2当用户抢标的时候用户抢标的压力又分为两个阶段抢标前和抢标中。抢标前因为满标速度很快用户提前打开抢标页面不断刷新这样数据库的查询压力会不断增大如果抢标的用户量非常大会导致在抢标之前将数据库连接数用完抢标中单次购买大概会涉及15张左右表进行更改查询每个标的份额1000万大概每次会有100-200人左右购买完成满标以中间值150人计算在几秒的时间内需要对数据更新2000-3000次(仅仅是更新不包括查询 )产生大量并发可能会导致更新失败或者连接超时从而影响到用户投标和系统正常满标。5 解决方案1、web服务器解决方案单个用户访问web服务的示意图目前网站和平台APP均是采用了两台服务来做均衡负责每台服务器中安装了apache来做服务端接受处理每台apache最大可以处理大约2000条连接。因此理论上目前网站或者APP可以处理大于4000个用户请求。如果要支持同时1万的请求则需要5台apache服务器来支持,因此目前缺少6台web服务器。升级服务器后的访问示意图2、数据库解决方案当前数据库的部署方案1)主从分离解决主库80%的查询压力。目前平台官网、APP均连接mysql主库导致主库压力倍增把服务中的查询全部迁移到从数据库可以大量减轻主库的压力。2)增加缓存服务器。当从库查询到达峰值的时候也会影响主从的同步从而影响交易因此对用户经常使用的查询进行缓存以达到减少数据库的请求压力。需要新增三台缓存服务器搭建redis集群。3、其它优化1官网首页静态化从cnzz统计来分析首页占比网站的整体访问量的15%左右对于首页不经常变动的数据通过静态化来处理提升官网打开的流畅度。2apache服务器的优化开启gzip压缩配置合理的链接数等去掉投资过程中的更新热点标的进度表。每次投标成功或者失败都需要对标的进度表进行更新多线程更新的时候就会出现乐观锁等问题。去掉过程中的更新只在满标后将标的进度信息保存在标的进度表优化投资过程中对数据库的压力。6 服务器升级方案
RELATED

相关推荐

35岁转行AI大模型:挑战、机遇与实战路径

35岁转行AI大模型:挑战、机遇与实战路径

1. 35岁转行AI大模型的现实挑战与机遇去年我在技术社区遇到一位36岁的机械工程师王磊,他用了14个月系统学习AI大模型开发,现在已成功加入某智能客服创业团队。这个案例让我意识到:年龄和零基础从来不是转行的绝对障碍,关键在于方法…

📅 2026/10/5 4:55:23
一个由进程内存布局异常引起的问题

一个由进程内存布局异常引起的问题

前段时间业务反映某类服务器上更新了 bash 之后,ssh 连上去偶发登陆失败,客户端吐出错误信息如下所示: 图 - 0 该版本 bash 为部门这边所定制,但是实现上与原生版并没有不同,那么这些错误从哪里来? 是 …

📅 2026/10/5 4:55:12
】[Ceiling节点]原理解析与实际应用

】[Ceiling节点]原理解析与实际应用

ing节点在Shader Graph中属于数学运算类别,它接受任意维度的矢量输入,并返回相同维度的矢量输出。这意味着它可以处理从单个浮点数到四维矢量的各种数据类型,为着色器开发提供了极大的灵活性。理解Ceiling节点的工作原理和应用场景对于创建高…

📅 2026/10/2 11:11:24
MORE NEWS

更多资讯

📰

AI Agent工程实现:七要素与七个决策点实战解析

搞AI Agent这两年,我最大的感受是:大多数人不是被“模型不够强”卡死的,而是被“工程实现”卡死的。我接触过不少团队,ChatGPT、Claude、国产大模型用得很溜,但一到让Agent真正去干活——自动跟进客户、定时巡检数据、…

📰

网络安全意识培训PPT实战转化指南:从幻灯片到行为习惯

简介:本资源是一份面向企业员工与公众的网络安全意识培训PPT课件,聚焦日常生活与办公场景中的典型风险应对,系统提升个人与组织的信息防护能力。课件内容覆盖勒索病毒(WannaCry、Petya)危害与防范、安全软件核心功能&a…

📰

中国AI算力被低估的真相:从单卡参数到系统工程

1. 被低估的算力:一个被反复误读的产业切面聊到中国AI算力,很多人脑子里第一反应是"卡不够""被卡脖子""差距至少两三代"。这种判断在2022年到2023年确实有它的现实基础,但如果你真的在一线做过大模型训练、推理…

📰

RobotStudio码垛机器人仿真工作站创建全流程

1. 项目概述:为什么要用 RobotStudio 做码垛仿真码垛是工业机器人应用里非常典型的场景,从饮料、食品到化工、建材行业,几乎每条包装线末端都少不了码垛工位。以前做码垛项目,最大的问题是现场调试时间太长,机器人停在…

📰

智能体安全边界四层架构与内核层防护实战

1. 从18000条帖子说起:智能体安全边界到底在防什么先把这个标题拆开看。“18000条帖子”不是一个小数目,它意味着一个智能体在真实环境里跑了足够长的时间,处理了足够多的输入,也踩了足够多的坑。这个量级下暴露出来的问题&#x…

📰

Android音频路由原理:AudioTrack如何选择输出设备及AudioPolicyManager决策解析

插上耳机再按播放,声音会立刻从耳机出来,还是先从扬声器外放一下再切过去?做播放器开发的同学大概率都遇到过类似问题:明明代码里new了一个AudioTrack,数据也write进去了,可声音就是跑到了你没想到的地方。…

TODAY

今日更新

THIS WEEK

本周精选

THIS MONTH

本月热门

读完文章,想聊聊您的网站?

告诉我们您的行业与需求,资深顾问一对一梳理方案与报价,全程免费。

📞 💬