首页 / 圈子 / 沈阳 / 帖子详情
🍪
阿梧
2026-10-12 · 📍沈阳 禅城区

线上事故复盘:我删库没备份那晚

测试环境脚本误在生产执行,删了一张表。万幸有前一天的全量备份+binlog 恢复,停机 40 分钟。复盘四问:为什么有删除权限(权限过大)、为什么没二次确认(脚本没加 where 校验)、为什么单点(没有从库)、为什么凌晨改库(流程违规)。事故不可怕,不改才是灾难。前后折腾了9个月,总算是把这件事理顺了。

线上事故复盘:我删库没备份那晚配图线上事故复盘:我删库没备份那晚配图
👍 112💬 25⭐ 36👁 259

🔒 联系方式(微信号)

vq****z

小程序内通过积分或免费次数解锁 · 交易前请核实对方身份,谨防诈骗

💬 网友评论(25 条)

🙂
邻居 · 12 分钟前
楼主后来怎么样了?追更一下。别被一时热情冲昏头,冷静两天再做决定。我写了 800 行一个大方法,被前辈批「能跑但没法维护」。裁员名单出来,业务没人能接我这块。楼主打到点子上了,句句在理。身边人的经验比网上攻略靠谱,但也要自己判断。我周末花 4 小时写了两个 spike demo:压测数据+开发体验对比,周一会上 10 分钟拍板。大事化小,拆成几步一件件来,就不慌了。这事儿最考验的其实是沟通方式。同样的诉求,换一种说法,对方的配合度完全不一样。把话说到位、把需求讲具体,比反复催促管用得多。以上是我的一家之言,仅供参考。
🙂
邻居 · 49 分钟前
补充一个容易被忽略的点。信息差才是最大的坑,多问多查不吃亏。我的时间线:第 1 周整理简历+复盘项目量化成果(QPS、成本节省),第 2-6 周刷题 120 道+八股 3 轮,第 7-11 周面试 9 家,拿到 2 个 offer 涨薪 15%。蹲一个后续,线上事故复盘:我删库最后怎么解决的。心态放平,很多当时觉得天大的事,过两年看都是小事。我跳槽时的策略:把小公司经验包装成「从 0 到 1 的完整系统」叙事,重点讲决策和结果。杭州允许远程的公司还多吗?大厂 3 年:深度有限但简历镀金。杭州的外包兄弟,别把自己当外人。关键动作:把「做了什么」改写成「带来了什么」。万幸有前一天的全量备份+binlog 恢复,停机 40 分钟。跟对人很重要,圈子里的老人一句话顶新手查一周。我还观察到一个规律:这类事情做得好的人,往往不是最聪明的,而是最有耐心的。他们愿意多问一句、多查一步、多等一等,最后的结果反而比抢跑的人好很多。举个例子:我之前杭州有个朋友遇到类似情况,一开始也是没当回事,后来发现问题越滚越大,最后花了双倍的时间和6700才收拾好,从那以后他做事前都会先把各种可能性列一遍,这个习惯我一直记着。结论:副业难成主业,但逼你把知识输出化。预算一定要留出两成余量,不然中途会很被动。杭州一家电商公司裁掉整个后端组。关于费用,我的原则是:明面上的钱大方花,暗地里的冤枉钱一分不花。事前问清楚收费明细,事中留好每一笔凭证,事后核对没有异议再结清。祝各位都顺顺利利,少踩坑。
🙂
邻居 · 0 小时前
有个土办法亲测有效,分享给济南的朋友。从旁观者角度补个视角。时间点选得对,事情就成了一半。我还观察到一个规律:这类事情做得好的人,往往不是最聪明的,而是最有耐心的。他们愿意多问一句、多查一步、多等一等,最后的结果反而比抢跑的人好很多。把最重要的三条写下来贴在显眼处,比什么都管用。预算一定要留出两成余量,不然中途会很被动。时间安排上也有讲究:避开高峰期、留出缓冲时间、把最不确定的环节放在前面做,这样即使出问题也有转圜的余地,不会全线崩盘。济南接私活的兄弟,先小人后君子。这行的水比想象中深,外行别轻易下场。另外,别指望一次就把所有问题想明白,边做边调整才是常态。我自己的做法是每完成一个阶段就回头看看,把新问题记下来,下次遇到就知道怎么绕了。这事儿最考验的其实是沟通方式。同样的诉求,换一种说法,对方的配合度完全不一样。把话说到位、把需求讲具体,比反复催促管用得多。匿了,怕被熟人看到。
🙂
邻居 · 0 小时前
写得很真实,看完默默收藏了。同样的起点,我选了另一条路,结果。我问三个:1. 团队目前最大的技术债是什么;。裁员名单出来,业务没人能接我这块。还有一个容易被忽视的点:找帮忙的人要看靠谱程度而不是价格。便宜但不上心的,最后往往要返工,来回一算反而更贵,还搭进去感情。小公司 5 年:全栈啥都干,简历没亮点(没流量没规模)。最后说说兜底方案:一定要提前想好「如果不成怎么办」。有退路的人做决定更果断,没有退路的人容易被一时的情绪推着走,这往往才是最贵的代价。再说个反面例子:另一拨人图省事,口头说得好听,什么都没落纸面,结果中途变卦谁也拿不出证据,闹得很不愉快。所以说该有的手续一步都不能省,看似麻烦,其实是在保护自己。别被一时热情冲昏头,冷静两天再做决定。我 34 岁,没转管理,走专家路线:专攻支付清结算领域,成为组里唯一懂全链路的人。公司允许每周 2 天远程。楼主能展开讲讲中间那段吗。事故不可怕,不改才是灾难。这事我站另一边,说说为什么。合肥的大龄码农共勉。我的数据:远程日代码提交多 20%,但方案讨论变慢(打字说不清)。不是说管理不好,是说:不可替代性比 title 更抗风险。多对比几家总没错,别嫌麻烦。举个例子:我之前合肥有个朋友遇到类似情况,一开始也是没当回事,后来发现问题越滚越大,最后花了双倍的时间和6500才收拾好,从那以后他做事前都会先把各种可能性列一遍,这个习惯我一直记着。时间安排上也有讲究:避开高峰期、留出缓冲时间、把最不确定的环节放在前面做,这样即使出问题也有转圜的余地,不会全线崩盘。关键动作:把「做了什么」改写成「带来了什么」。{topic}这事说复杂也复杂,说简单也简单——我周末花 4 小时写了两个 spike demo:压测数据+开发体验对比,周一会上 10 分钟拍板。围绕{topic},我观察到的现象是:测试环境脚本误在生产执行,删了一张表。白纸黑字写清楚,比口头承诺靠谱一百倍。合肥允许远程的公司还多吗?有同样情况的朋友可以私信交流。
🙂
邻居 · 0 小时前
楼主把我想说的都说了,还说得更好。举个例子:我之前佛山有个朋友遇到类似情况,一开始也是没当回事,后来发现问题越滚越大,最后花了双倍的时间和8000才收拾好,从那以后他做事前都会先把各种可能性列一遍,这个习惯我一直记着。我也是这么过来的,感同身受。身边人的经验比网上攻略靠谱,但也要自己判断。楼主打到点子上了,句句在理。别小看琐碎的准备工作,全都是伏笔。三天重构完,后来加需求只改了 30 行。时间点选得对,事情就成了一半。最后说说兜底方案:一定要提前想好「如果不成怎么办」。有退路的人做决定更果断,没有退路的人容易被一时的情绪推着走,这往往才是最贵的代价。再说个反面例子:另一拨人图省事,口头说得好听,什么都没落纸面,结果中途变卦谁也拿不出证据,闹得很不愉快。所以说该有的手续一步都不能省,看似麻烦,其实是在保护自己。佛山接私活的兄弟,先小人后君子。拿到了几个 offer。关于费用,我的原则是:明面上的钱大方花,暗地里的冤枉钱一分不花。事前问清楚收费明细,事中留好每一笔凭证,事后核对没有异议再结清。被怼不丢人,丢了成长才丢人。转正时领导说:外包里你是最像自己人的。我的经验总结成三句话,句句都是教训换来的。别贪快,稳扎稳打反而更快。我还观察到一个规律:这类事情做得好的人,往往不是最聪明的,而是最有耐心的。他们愿意多问一句、多查一步、多等一等,最后的结果反而比抢跑的人好很多。团队为 ORM 争论两周。先小范围试错,跑通了再放大。以上,共勉。
🙂
邻居 · 0 小时前
作为过来人,这篇我看得很认真。我还观察到一个规律:这类事情做得好的人,往往不是最聪明的,而是最有耐心的。他们愿意多问一句、多查一步、多等一等,最后的结果反而比抢跑的人好很多。不是说管理不好,是说:不可替代性比 title 更抗风险。建议把这几步抄下来,走一遍心里就有数。有个细节想问下楼主。作为过来人,这篇我看得很认真。复盘四问:为什么有删除权限(权限过大)、为什么没二次确认(脚本没加 where 校验)、为什么单点(没有从库)、为什么凌晨改库(流程违规)。别怕开口问,脸皮厚一点,路好走很多。看完补充两句,都是血泪教训。转正时领导说:外包里你是最像自己人的。时间安排上也有讲究:避开高峰期、留出缓冲时间、把最不确定的环节放在前面做,这样即使出问题也有转圜的余地,不会全线崩盘。多留一手备选方案,关键时刻能救命。别小看琐碎的准备工作,全都是伏笔。关于{topic},还有一层没被说到:公司允许每周 2 天远程。我跳槽时的策略:把小公司经验包装成「从 0 到 1 的完整系统」叙事,重点讲决策和结果。我 34 岁,没转管理,走专家路线:专攻支付清结算领域,成为组里唯一懂全链路的人。心态放平,很多当时觉得天大的事,过两年看都是小事。我写了 800 行一个大方法,被前辈批「能跑但没法维护」。再说个反面例子:另一拨人图省事,口头说得好听,什么都没落纸面,结果中途变卦谁也拿不出证据,闹得很不愉快。所以说该有的手续一步都不能省,看似麻烦,其实是在保护自己。被怼不丢人,丢了成长才丢人。我唱个反调,说说另一面的情况。另外,别指望一次就把所有问题想明白,边做边调整才是常态。我自己的做法是每完成一个阶段就回头看看,把新问题记下来,下次遇到就知道怎么绕了。跟对人很重要,圈子里的老人一句话顶新手查一周。结合项目背:讲索引就说「我把一张 2000 万的表查询从 8 秒优化到 200 毫秒,做了索引重设计和覆盖索引」。细节决定成败,前期多做一点功课,后面就少一分焦虑。楼主把我想说的都说了,还说得更好。时间点选得对,事情就成了一半。改了 8 版需求,尾款拖了 3 个月。结论:副业难成主业,但逼你把知识输出化。先写到这,想起来再补充。
🙂
邻居 · 0 小时前
弱弱问一句,这事有没有更简单的路子。别不好意思拒绝,很多麻烦都是不好意思开始的。有时候停下来想想,比闷头往前冲更有用。技术人最大的话语权是证据。绝不问薪资(HR 环节再谈)。我的时间线:第 1 周整理简历+复盘项目量化成果(QPS、成本节省),第 2-6 周刷题 120 道+八股 3 轮,第 7-11 周面试 9 家,拿到 2 个 offer 涨薪 15%。三天重构完,后来加需求只改了 30 行。举个例子:我之前天津有个朋友遇到类似情况,一开始也是没当回事,后来发现问题越滚越大,最后花了双倍的时间和8400才收拾好,从那以后他做事前都会先把各种可能性列一遍,这个习惯我一直记着。后面有进展我会回来更新。
🙂
邻居 · 0 小时前
看得我坐不住了,说说我的亲身经历。八股是地图,项目是实地。南宁的大龄码农共勉。别怕开口问,脸皮厚一点,路好走很多。接外包(累,单价卷)、写技术专栏(月入 800 峰值)、做小工具+广告位(稳定 300/月)、录付费课(做完一门 6000)。结论:副业难成主业,但逼你把知识输出化。有同样情况的朋友可以私信交流。
🙂
邻居 · 0 小时前
我的情况和楼主相反,说出来给大家参考。花钱能解决的都不是大事,时间才是最贵的成本。另外,别指望一次就把所有问题想明白,边做边调整才是常态。我自己的做法是每完成一个阶段就回头看看,把新问题记下来,下次遇到就知道怎么绕了。大事化小,拆成几步一件件来,就不慌了。技术人最大的话语权是证据。关键还是把细节落实,我的做法是。跟对人很重要,圈子里的老人一句话顶新手查一周。接外包(累,单价卷)、写技术专栏(月入 800 峰值)、做小工具+广告位(稳定 300/月)、录付费课(做完一门 6000)。多留一手备选方案,关键时刻能救命。楼主打到点子上了,句句在理。匿了,怕被熟人看到。
🙂
邻居 · 0 小时前
同款情况,我去年也碰上了,忍不住说说我的结果。最后说说兜底方案:一定要提前想好「如果不成怎么办」。有退路的人做决定更果断,没有退路的人容易被一时的情绪推着走,这往往才是最贵的代价。别怕开口问,脸皮厚一点,路好走很多。信息差才是最大的坑,多问多查不吃亏。楼主后来怎么样了?追更一下。关于费用,我的原则是:明面上的钱大方花,暗地里的冤枉钱一分不花。事前问清楚收费明细,事中留好每一笔凭证,事后核对没有异议再结清。再说个反面例子:另一拨人图省事,口头说得好听,什么都没落纸面,结果中途变卦谁也拿不出证据,闹得很不愉快。所以说该有的手续一步都不能省,看似麻烦,其实是在保护自己。这个总结可以直接当手册用了。还有一个容易被忽视的点:找帮忙的人要看靠谱程度而不是价格。便宜但不上心的,最后往往要返工,来回一算反而更贵,还搭进去感情。改了 8 版需求,尾款拖了 3 个月。济南允许远程的公司还多吗?另外,别指望一次就把所有问题想明白,边做边调整才是常态。我自己的做法是每完成一个阶段就回头看看,把新问题记下来,下次遇到就知道怎么绕了。前期越细,后面越省心,这是通用规律。绝不问薪资(HR 环节再谈)。该走的流程一步都别省,省的都会加倍还回来。我还观察到一个规律:这类事情做得好的人,往往不是最聪明的,而是最有耐心的。他们愿意多问一句、多查一步、多等一等,最后的结果反而比抢跑的人好很多。预算一定要留出两成余量,不然中途会很被动。也有不一样的声音,仅供参考。关于{topic},还有一层没被说到:结合项目背:讲索引就说「我把一张 2000 万的表查询从 8 秒优化到 200 毫秒,做了索引重设计和覆盖索引」。匿了,怕被熟人看到。
✍️ 说点什么…(扫码进小程序评论)

评论、点赞需在微信小程序「本地生活助手」内完成,防止恶意刷屏

微信扫码查看帖子详情
📱 微信扫一扫 · 进小程序查看完整内容并联系发布者