首页 / 圈子 / 沈阳 / 帖子详情
🐷
阿贝
2026-11-18 · 📍沈阳 岳麓区

线上事故复盘:我删库没备份那晚

测试环境脚本误在生产执行,删了一张表。万幸有前一天的全量备份+binlog 恢复,停机 40 分钟。复盘四问:为什么有删除权限(权限过大)、为什么没二次确认(脚本没加 where 校验)、为什么单点(没有从库)、为什么凌晨改库(流程违规)。事故不可怕,不改才是灾难。前后折腾了7个月,总算是把这件事理顺了。

线上事故复盘:我删库没备份那晚配图线上事故复盘:我删库没备份那晚配图
👍 564💬 35⭐ 302👁 2135

🔒 联系方式(微信号)

v0****y

小程序内通过积分或免费次数解锁 · 交易前请核实对方身份,谨防诈骗

💬 网友评论(35 条)

🙂
邻居 · 12 分钟前
还有一点大家容易忽略,我说说。把最重要的三条写下来贴在显眼处,比什么都管用。长沙的同行别 all in 副业,本职护城河先挖深。我还观察到一个规律:这类事情做得好的人,往往不是最聪明的,而是最有耐心的。他们愿意多问一句、多查一步、多等一等,最后的结果反而比抢跑的人好很多。就说这么多,希望能帮到有需要的人。
🙂
邻居 · 49 分钟前
别急着做决定,先按我说的捋一遍。别不好意思拒绝,很多麻烦都是不好意思开始的。遇到分歧先沟通,别憋着,憋着憋着就成大事了。北京的大龄码农共勉。这行的水比想象中深,外行别轻易下场。看完补充两句,都是血泪教训。时间安排上也有讲究:避开高峰期、留出缓冲时间、把最不确定的环节放在前面做,这样即使出问题也有转圜的余地,不会全线崩盘。我的思路和楼主不太一样,供参考。再说个反面例子:另一拨人图省事,口头说得好听,什么都没落纸面,结果中途变卦谁也拿不出证据,闹得很不愉快。所以说该有的手续一步都不能省,看似麻烦,其实是在保护自己。我周末花 4 小时写了两个 spike demo:压测数据+开发体验对比,周一会上 10 分钟拍板。信息差才是最大的坑,多问多查不吃亏。有时候停下来想想,比闷头往前冲更有用。问完这家公司我主动拒了——技术债没人管,去了就是填坑。再补充一点心态上的建议:别拿自己的进度和别人比,每个人的情况不一样,盯着自己的目标一步一步走,反而更容易达成。结合项目背:讲索引就说「我把一张 2000 万的表查询从 8 秒优化到 200 毫秒,做了索引重设计和覆盖索引」。楼主后来怎么样了?追更一下。多对比几家总没错,别嫌麻烦。该走的流程一步都别省,省的都会加倍还回来。别人的成功经验要参考,但路上的坑得自己踩过才记得住。围绕{topic},我观察到的现象是:八股是地图,项目是实地。这事儿最考验的其实是沟通方式。同样的诉求,换一种说法,对方的配合度完全不一样。把话说到位、把需求讲具体,比反复催促管用得多。跟对人很重要,圈子里的老人一句话顶新手查一周。最后说说兜底方案:一定要提前想好「如果不成怎么办」。有退路的人做决定更果断,没有退路的人容易被一时的情绪推着走,这往往才是最贵的代价。不是说管理不好,是说:不可替代性比 title 更抗风险。码字不易,觉得有用点个赞。
🙂
邻居 · 0 小时前
也有不一样的声音,仅供参考。这篇值得置顶,说出了大家的心声。我的情况和楼主相反,说出来给大家参考。把最重要的三条写下来贴在显眼处,比什么都管用。我的数据:远程日代码提交多 20%,但方案讨论变慢(打字说不清)。白纸黑字写清楚,比口头承诺靠谱一百倍。很多事不是难在做,而是难在决定做之前的纠结。小公司的兄弟别自卑,讲好故事。前期越细,后面越省心,这是通用规律。这帖子写得真实,让我想起自己踩过的坑。时间安排上也有讲究:避开高峰期、留出缓冲时间、把最不确定的环节放在前面做,这样即使出问题也有转圜的余地,不会全线崩盘。这事儿最考验的其实是沟通方式。同样的诉求,换一种说法,对方的配合度完全不一样。把话说到位、把需求讲具体,比反复催促管用得多。回到{topic}这件事本身,八股是地图,项目是实地。被怼不丢人,丢了成长才丢人。他给我演示怎么拆:单一职责、参数对象化、异常分层。经历类似但选择不同,结果也不同。围绕{topic},我观察到的现象是:我跳槽时的策略:把小公司经验包装成「从 0 到 1 的完整系统」叙事,重点讲决策和结果。同款情况,我去年也碰上了,忍不住说说我的结果。成都的同行别 all in 副业,本职护城河先挖深。再说个反面例子:另一拨人图省事,口头说得好听,什么都没落纸面,结果中途变卦谁也拿不出证据,闹得很不愉快。所以说该有的手续一步都不能省,看似麻烦,其实是在保护自己。货比三家不是砍价,是比服务比细节。成都允许远程的公司还多吗?另外,别指望一次就把所有问题想明白,边做边调整才是常态。我自己的做法是每完成一个阶段就回头看看,把新问题记下来,下次遇到就知道怎么绕了。这篇让我想起三年前的自己,当时也是两头难。还有一个容易被忽视的点:找帮忙的人要看靠谱程度而不是价格。便宜但不上心的,最后往往要返工,来回一算反而更贵,还搭进去感情。有个细节想问下楼主。遇到分歧先沟通,别憋着,憋着憋着就成大事了。我的做法:写代码在家,评审和脑暴必须到公司。回到{topic}这件事本身,小公司 5 年:全栈啥都干,简历没亮点(没流量没规模)。三天重构完,后来加需求只改了 30 行。成都的外包兄弟,别把自己当外人。回复完毕,蹲后续。
🙂
邻居 · 0 小时前
我经历和楼主很像,但结局有点不一样。再说个反面例子:另一拨人图省事,口头说得好听,什么都没落纸面,结果中途变卦谁也拿不出证据,闹得很不愉快。所以说该有的手续一步都不能省,看似麻烦,其实是在保护自己。这事儿最考验的其实是沟通方式。同样的诉求,换一种说法,对方的配合度完全不一样。把话说到位、把需求讲具体,比反复催促管用得多。最后说说兜底方案:一定要提前想好「如果不成怎么办」。有退路的人做决定更果断,没有退路的人容易被一时的情绪推着走,这往往才是最贵的代价。多留一手备选方案,关键时刻能救命。补充一个容易被忽略的点。跟对人很重要,圈子里的老人一句话顶新手查一周。建议把这几步抄下来,走一遍心里就有数。关键动作:把「做了什么」改写成「带来了什么」。身边人的经验比网上攻略靠谱,但也要自己判断。大厂 3 年:深度有限但简历镀金。以上是我的一家之言,仅供参考。
🙂
邻居 · 0 小时前
插个问题,如果情况反过来该怎么处理。长春的外包兄弟,别把自己当外人。别不好意思拒绝,很多麻烦都是不好意思开始的。我跳槽时的策略:把小公司经验包装成「从 0 到 1 的完整系统」叙事,重点讲决策和结果。再补充一点心态上的建议:别拿自己的进度和别人比,每个人的情况不一样,盯着自己的目标一步一步走,反而更容易达成。时间安排上也有讲究:避开高峰期、留出缓冲时间、把最不确定的环节放在前面做,这样即使出问题也有转圜的余地,不会全线崩盘。另外,别指望一次就把所有问题想明白,边做边调整才是常态。我自己的做法是每完成一个阶段就回头看看,把新问题记下来,下次遇到就知道怎么绕了。这事儿最考验的其实是沟通方式。同样的诉求,换一种说法,对方的配合度完全不一样。把话说到位、把需求讲具体,比反复催促管用得多。别小看琐碎的准备工作,全都是伏笔。别被一时热情冲昏头,冷静两天再做决定。插个问题,如果情况反过来该怎么处理。有时候停下来想想,比闷头往前冲更有用。货比三家不是砍价,是比服务比细节。关于{topic},还有一层没被说到:万幸有前一天的全量备份+binlog 恢复,停机 40 分钟。长春的同行别 all in 副业,本职护城河先挖深。还有一个容易被忽视的点:找帮忙的人要看靠谱程度而不是价格。便宜但不上心的,最后往往要返工,来回一算反而更贵,还搭进去感情。多对比几家总没错,别嫌麻烦。转正时领导说:外包里你是最像自己人的。面试官想听的是你踩过的坑。结合项目背:讲索引就说「我把一张 2000 万的表查询从 8 秒优化到 200 毫秒,做了索引重设计和覆盖索引」。八股是地图,项目是实地。最后说说兜底方案:一定要提前想好「如果不成怎么办」。有退路的人做决定更果断,没有退路的人容易被一时的情绪推着走,这往往才是最贵的代价。看完这篇想起我长春那会儿的经历,几乎一模一样。问完这家公司我主动拒了——技术债没人管,去了就是填坑。时间点选得对,事情就成了一半。我还观察到一个规律:这类事情做得好的人,往往不是最聪明的,而是最有耐心的。他们愿意多问一句、多查一步、多等一等,最后的结果反而比抢跑的人好很多。把最重要的三条写下来贴在显眼处,比什么都管用。回复完毕,蹲后续。
🙂
邻居 · 0 小时前
补充一个容易被忽略的点。细节决定成败,前期多做一点功课,后面就少一分焦虑。举个例子:我之前深圳有个朋友遇到类似情况,一开始也是没当回事,后来发现问题越滚越大,最后花了双倍的时间和800才收拾好,从那以后他做事前都会先把各种可能性列一遍,这个习惯我一直记着。别人的成功经验要参考,但路上的坑得自己踩过才记得住。我的时间线:第 1 周整理简历+复盘项目量化成果(QPS、成本节省),第 2-6 周刷题 120 道+八股 3 轮,第 7-11 周面试 9 家,拿到 2 个 offer 涨薪 15%。再说个反面例子:另一拨人图省事,口头说得好听,什么都没落纸面,结果中途变卦谁也拿不出证据,闹得很不愉快。所以说该有的手续一步都不能省,看似麻烦,其实是在保护自己。{topic}这事说复杂也复杂,说简单也简单——大厂 3 年:深度有限但简历镀金。不是说管理不好,是说:不可替代性比 title 更抗风险。多对比几家总没错,别嫌麻烦。这事我站另一边,说说为什么。关于{topic},还有一层没被说到:结论:副业难成主业,但逼你把知识输出化。结合我自己搞{topic}的过程,结合项目背:讲索引就说「我把一张 2000 万的表查询从 8 秒优化到 200 毫秒,做了索引重设计和覆盖索引」。围绕{topic},我观察到的现象是:我的数据:远程日代码提交多 20%,但方案讨论变慢(打字说不清)。跟对人很重要,圈子里的老人一句话顶新手查一周。大家有更好的办法欢迎指正。
🙂
邻居 · 0 小时前
补充几个可落地的做法,都是我试过的。结合项目背:讲索引就说「我把一张 2000 万的表查询从 8 秒优化到 200 毫秒,做了索引重设计和覆盖索引」。成都一家电商公司裁掉整个后端组。小公司的兄弟别自卑,讲好故事。绝不问薪资(HR 环节再谈)。白纸黑字写清楚,比口头承诺靠谱一百倍。关键动作:把「做了什么」改写成「带来了什么」。也有不一样的声音,仅供参考。楼主后来怎么样了?追更一下。最后说说兜底方案:一定要提前想好「如果不成怎么办」。有退路的人做决定更果断,没有退路的人容易被一时的情绪推着走,这往往才是最贵的代价。以上,共勉。
🙂
邻居 · 0 小时前
补充几个可落地的做法,都是我试过的。前期越细,后面越省心,这是通用规律。太有共鸣了,我朋友上个月刚经历了这个。小公司 5 年:全栈啥都干,简历没亮点(没流量没规模)。这事儿最考验的其实是沟通方式。同样的诉求,换一种说法,对方的配合度完全不一样。把话说到位、把需求讲具体,比反复催促管用得多。别怕开口问,脸皮厚一点,路好走很多。关键动作:把「做了什么」改写成「带来了什么」。小公司的兄弟别自卑,讲好故事。先小范围试错,跑通了再放大。就拿{topic}来说,接外包(累,单价卷)、写技术专栏(月入 800 峰值)、做小工具+广告位(稳定 300/月)、录付费课(做完一门 6000)。写得很真实,看完默默收藏了。遇到分歧先沟通,别憋着,憋着憋着就成大事了。口水仗没用,跑起来说话。信息差才是最大的坑,多问多查不吃亏。跟对人很重要,圈子里的老人一句话顶新手查一周。时间点选得对,事情就成了一半。关于费用,我的原则是:明面上的钱大方花,暗地里的冤枉钱一分不花。事前问清楚收费明细,事中留好每一笔凭证,事后核对没有异议再结清。也有不一样的声音,仅供参考。给后来人提个醒,别重蹈我的覆辙。保持记录和复盘,进步才看得见。有个土办法亲测有效,分享给福州的朋友。再补充一点心态上的建议:别拿自己的进度和别人比,每个人的情况不一样,盯着自己的目标一步一步走,反而更容易达成。还有一个容易被忽视的点:找帮忙的人要看靠谱程度而不是价格。便宜但不上心的,最后往往要返工,来回一算反而更贵,还搭进去感情。换个角度聊聊,可能泼冷水但都是实话。最后说说兜底方案:一定要提前想好「如果不成怎么办」。有退路的人做决定更果断,没有退路的人容易被一时的情绪推着走,这往往才是最贵的代价。大家有更好的办法欢迎指正。
🙂
邻居 · 0 小时前
给楼主和有同样困惑的朋友几条实操建议。顺带提醒一句,合同/凭证一定要留好。别小看琐碎的准备工作,全都是伏笔。这个总结可以直接当手册用了。先小范围试错,跑通了再放大。拿到了几个 offer。他给我演示怎么拆:单一职责、参数对象化、异常分层。花钱能解决的都不是大事,时间才是最贵的成本。时间点选得对,事情就成了一半。写得很真实,看完默默收藏了。别被一时热情冲昏头,冷静两天再做决定。不是说管理不好,是说:不可替代性比 title 更抗风险。小公司 5 年:全栈啥都干,简历没亮点(没流量没规模)。最后说说兜底方案:一定要提前想好「如果不成怎么办」。有退路的人做决定更果断,没有退路的人容易被一时的情绪推着走,这往往才是最贵的代价。我的思路和楼主不太一样,供参考。货比三家不是砍价,是比服务比细节。遇到分歧先沟通,别憋着,憋着憋着就成大事了。大厂 3 年:深度有限但简历镀金。三天重构完,后来加需求只改了 30 行。提醒一下广州的朋友,这里有几个坑要避开。还有一个容易被忽视的点:找帮忙的人要看靠谱程度而不是价格。便宜但不上心的,最后往往要返工,来回一算反而更贵,还搭进去感情。我问三个:1. 团队目前最大的技术债是什么;。事故不可怕,不改才是灾难。被怼不丢人,丢了成长才丢人。接外包(累,单价卷)、写技术专栏(月入 800 峰值)、做小工具+广告位(稳定 300/月)、录付费课(做完一门 6000)。回复完毕,蹲后续。
🙂
邻居 · 0 小时前
这事我站另一边,说说为什么。先小范围试错,跑通了再放大。很多事不是难在做,而是难在决定做之前的纠结。不是说管理不好,是说:不可替代性比 title 更抗风险。花钱能解决的都不是大事,时间才是最贵的成本。这里得泼盆冷水,有些风险要说在前面。心态放平,很多当时觉得天大的事,过两年看都是小事。别被一时热情冲昏头,冷静两天再做决定。想问下南宁这边大概什么行情。三天重构完,后来加需求只改了 30 行。另外,别指望一次就把所有问题想明白,边做边调整才是常态。我自己的做法是每完成一个阶段就回头看看,把新问题记下来,下次遇到就知道怎么绕了。聊到这里,散会,该干嘛干嘛去。
✍️ 说点什么…(扫码进小程序评论)

评论、点赞需在微信小程序「本地生活助手」内完成,防止恶意刷屏

微信扫码查看帖子详情
📱 微信扫一扫 · 进小程序查看完整内容并联系发布者