我的后端技术栈演进史：从单体到微服务的踩坑记录-北京尧图网络

代码写得好好的线上跑得稳稳的直到某个周五晚上支付回调超时数据库连接打满CPU飙到百分百我盯着监控面板上那条直冲云霄的红线才第一次意识到——单体应用这座看似坚固的城堡原来是用纸牌搭的。那是我的第一个后端项目一个典型的业务中台系统。所有人都觉得单体架构最省心一个仓库一套代码一次部署出了问题也好排查。可当业务量涨到一定规模单体架构的“省心”就变成了“揪心”。单体应用最大的谎言就是“我们只需要一个应用就够了”——实际上你只是在用一个巨大的进程强撑着所有本应独立的关注点。从“能跑就行”到“不敢动代码”最开始写单体真的很爽。模型、服务、控制器层层堆叠业务逻辑一口气写到底上线就是docker run一把梭。但团队扩张到七八个人之后噩梦开始了每个人都在改同一个application.yml每次合并冲突都能耗掉半天。更可怕的是任何一处小小的改动都可能引发连锁故障。有一次我只是给用户表加了个索引结果半夜定时任务全部超时因为那个任务和用户查询共用同一个数据源连接池。单体架构的问题不在于不够好而在于它把所有的风险都放在了同一个篮子里。那个阶段我学会了第一课代码的耦合不是靠约定解决的而是靠物理边界。可当时我们连模块划分都没有只有层层嵌套的包名在假装“模块化”。每次上线都要全员连夜待命因为谁也不知道这次改动会炸出什么鬼来。后来我想了个“聪明”办法把定时任务、消息处理、Web 接口拆成三个部署单元。本以为这就是微服务了结果只是把一个大的单体拆成了三个小的单体共享数据库依然像一根钢索绑在所有服务脚下谁走一步全桥晃三晃。真正的踩坑之路才刚刚开始。第一次拆分被分布式支配的恐惧真正的微服务改造源于一次“不得不”。新业务需要对接第三方开放平台对方的回调模式要求我们必须提供独立的回调地址而且回调频率极高。老系统根本扛不住那种并发于是我痛下决心先把支付回调拆出去。第一步就踩了坑服务拆了数据库没拆。支付回调和用户订单还在同一个库里连接数很快被打爆。我天真地以为“服务独立”就是微服务结果分布式系统最经典的问题立刻找上门来——当你不小心拆出了第一个服务你就同时拆出了网络故障、数据一致性和分布式事务三个魔鬼。支付回调需要更新订单状态再通知营销服务发券还要给用户发短信。原本在单体里是三个方法调用事务一包就完事。拆开之后服务A成功了服务B超时了订单状态和发券记录对不上。晚上对账的时候客诉电话被打爆。那一刻我明白了微服务不解决业务复杂度它只是把复杂度从代码里挪到了网络里。而网络永远比你想象的更不可靠。那段时间我疯狂补习分布式事务知识最终选了本地消息表加消息队列的方案更新订单状态时在同一事务里写一条“待发送”消息由后台任务推给下游。这个方案土但可靠。在微服务的世界里宁可多写一张表也绝不能依赖“反正下次重试就能成功”的侥幸。因为侥幸都会在凌晨三点准时变成故障每次都是。乱象丛生的“微服务全家桶”阶段拆分出第一个服务之后事情像多米诺骨牌一样停不下来。订单、用户、库存、营销、客服……每个团队都想独立每个服务都想有自己的数据库。于是我们上了注册中心、配置中心、网关、链路追踪拉了一个闪亮亮的技术栈清单。你以为这是架构升级其实是灾难的平方。微服务最会骗人的广告词就是“技术栈自由”。每个服务可以自由选型听起来很美实际上运维成本直接爆炸。一个用 Python 写的服务一个用 Node 写的服务和一个用 Java 写的服务搅在一起光是处理不同语言之间的序列化兼容、字段命名风格、错误码语义就够一个团队专门写两个月胶水代码。更要命的是监控。单体时代一个日志文件滚一滚就完事。微服务之后一次请求要穿越五六个服务每个服务都有自己的日志格式还都不同。出问题了要靠人工在多个终端之间跳来跳去靠记忆拼出调用链。没有全链路追踪的微服务等于蒙着眼睛在雷区里跳舞——每个服务都告诉你“我正常”但整体就是不对。我们花了两周时间部署 Jaeger结果又发现跨服务传播的 traceId 在异步消息里全断了。当时真想把这堆服务全删了回到单体。但回头路是不可能走的。微服务一旦拆开就像潘多拉魔盒你可以把魔鬼放回去但绝对没法把盖子恢复原样。业务团队已经开始依赖独立的发布节奏依赖各自的数据库权限甚至依赖不同的容灾级别。架构上的债是可以靠技术还的组织上的债只能靠时间还。容器化与编排从手动到“自动踩坑”微服务数量一多部署成了噩梦。每个服务要配置端口、环境变量、健康检查、日志路径还要处理端口冲突。我记得有一次一个新同事把服务端口设成 8080结果和另一个服务的 Jenkins 构建任务冲突构建产物被覆盖整个测试环境崩了一个下午。痛定思痛我们上了 Docker 和 Kubernetes。Kubernetes 是一个好东西但它的学习曲线陡得像悬崖。你以为 Kubernetes 能帮你管理服务实际上它先帮你管理了绝望。YAML 文件嵌套十几层一个缩进错误就能让 Pod 处于 CrashLoopBackOff。我们最早一批服务在 K8s 上跑的时候每天不是在查 OOM就是在查 ImagePullBackOff或者查没配 readinessProbe 导致的流量打到未就绪 Pod。容器化最大的坑其实是资源限额。单体时代谁内存吃得多大家一起扛。容器化之后每个 Pod 都规定了limits内存一超就 OOMKill。有一个服务明明平时内存只有 200M高峰时突然涨到 1G因为我们的 JVM 堆参数还是按单体时代的老配置——在容器里跑 Java 服务如果不理会容器内存限制JVM 就会把 Pod 撑死然后你一脸懵地看着一片 OOMKilled 的蓝色告警。折腾了三个月终于部署稳定了。我们开始骄傲地讨论“云原生”直到某天宿主机宕机K8s 节点上几十个 Pod 全部重建数据库连接瞬间被打爆。没人告诉我K8s 的“自愈能力”在瞬间大规模重启时会变成“自爆能力”——节点故障时K8s 的驱逐和重建机制会产生“惊群效应”比单体时代的一次宕机更刺激。那个凌晨我一边在运维群里道歉一边疯狂地给数据库连接池调小给 Pod 加优雅终止给 readinessProbe 加预热时间。服务治理的弯道熔断、限流与雪崩K8s 只是让部署更优雅服务之间的通信治理才是微服务的核心。我们早期服务之间直接用 HTTP 调来调去超时时间设得很随意。结果有一次下游的搜索服务响应变慢上游服务全都卡在等待响应上线程池耗尽雪崩就发生了。微服务雪崩不是“某一个服务挂了”而是“所有服务都活着但谁也完不成请求”。那是一次印象极深的故障库存服务的一个 SQL 走了全表扫描响应从 20ms 涨到 2秒订单服务的 Tomcat 线程池满了紧接着所有依赖订单的服务开始排队最后网关也超时了整个首页变成白屏。用户没有收到任何错误提示因为网关直接拒绝连接了。后来我们引入了 Resilience4j给所有外部调用加超时、熔断和降级。熔断听着高级但配置不好就是灾难。熔断器的三个参数如果按“感觉”来调那基本等于给你的系统埋跳雷。我们把失败率阈值设成 50%结果下游故障时熔断器只要一打开服务立刻降级返回空数据然后又因为“空数据”被客户端判定为失败导致业务校验报错让熔断器不断重置。整整三天我们都在调参比写业务代码痛苦十倍。说到限流更是踩到坑坑见底。用Guava RateLimiter做单机限流服务一旦扩容到多实例限流就失效了。后来换成分布式限流引入 Redis 做计数器又遇到网络抖动导致 Redis 阻塞所有限流判断超时流量照样全部打进来。微服务治理的难点从来不是选一个工具而是你得明白这些工具都是“在特定条件下工作的工程妥协”。没有万能的银弹只有层出不穷的例外。演进到最后没有架构只有取舍现在你问我我的后端技术栈演进史讲完了吗没有永远讲不完。从单体到微服务从裸奔到 K8s从手工调用到熔断限流每一个阶段都在解决上一个阶段制造的问题同时制造下一个阶段的问题。后来我再回头看所谓的微服务架构本质上不是一种技术而是一种组织管理手段——它让你可以按照业务边界去组织团队按各自节奏去发布按各自容量去伸缩。但如果你没有组织上的支撑没有严格的服务契约管理没有自动化的测试和观测工具那么微服务只会把你带进更深的泥潭。我曾经很执着于“把架构做对”后来发现根本没有“对”的架构。最靠谱的架构是你和团队能够理解、能够驾驭、能够快速修复的架构。单体并不丢人微服务也不高级。真正决定成败的是你是否清楚每一个组件在故障时会发生什么是否给所有依赖都留好了降级和退路。我的后端技术栈演进史就是一部踩坑记录史。踩过的坑那么多最后沉淀下来的经验反而只有几句话数据库永远是最难拆的所以拆分服务之前先拆分数据消息队列不是万能解药但它能把你从分布式事务里救出来一半可观测性必须从第一天就开始做别等到找日志找断手时再来后悔一切不落到文档和演练的架构设计都是耍流氓。如今我依然在微服务的路上但不再追求“极致的解耦”。该硬的硬该软的软。有些服务永远适合单体有些边界永远模糊。技术的演进不是一条从低到高的直线而是一张密密麻麻的决策图谱踩过的每一个坑都在图谱上留下一个“别这样”的标记。如果你也正在这条路上我只能说恭喜你坑永远踩不完但你会越踩越稳。

我的后端技术栈演进史：从单体到微服务的踩坑记录

相关推荐

写给后端工程师：比写代码更重要的三件事

高中学历、面试 30 多家公司无回复后，他靠开源 AI 项目重获选择权

Go类型断言与类型切换

更多资讯

启动报Port 8088 was already in use？先查是谁占的

担心文档上云？本地运行的办公AI才敢放心用

先能用，再好用：从烂尾复盘到两周上线，全栈项目的‘原型—快速迭代‘方法论

深度思考模式把 ARC-AGI-2 从 17.6% 拉到 45.1%：对照 Gemini 3 Pro 的三份能力评测，看‘会思考‘改写了哪些边界

1.c++入门篇

《江灯合声》：有可行的分框版，也仍可以选择连续鸣谢

今日更新

面向复杂光照与角度的宠物面部识别鲁棒性增强策略

基于DRV8818与STM32的双极步进电机驱动方案实战解析

DRV8818PWPR+PIC18F45K80双极步进电机控制方案实战

本周精选

面向复杂光照与角度的宠物面部识别鲁棒性增强策略

基于DRV8818与STM32的双极步进电机驱动方案实战解析

DRV8818PWPR+PIC18F45K80双极步进电机控制方案实战

本月热门

面向复杂光照与角度的宠物面部识别鲁棒性增强策略

基于DRV8818与STM32的双极步进电机驱动方案实战解析

DRV8818PWPR+PIC18F45K80双极步进电机控制方案实战

读完文章，想聊聊您的网站？