首页 / 圈子 / 济南 / 帖子详情
🌷
博士老学究
2026-11-13 · 📍济南 和平区

线上事故复盘:我删库没备份那晚

测试环境脚本误在生产执行,删了一张表。万幸有前一天的全量备份+binlog 恢复,停机 40 分钟。复盘四问:为什么有删除权限(权限过大)、为什么没二次确认(脚本没加 where 校验)、为什么单点(没有从库)、为什么凌晨改库(流程违规)。事故不可怕,不改才是灾难。补充一句,天河区这边的具体情况可能略有差异,大家参考着看。

线上事故复盘:我删库没备份那晚配图线上事故复盘:我删库没备份那晚配图
👍 182💬 30⭐ 146👁 6475

🔒 联系方式(手机号)

155****1771

小程序内通过积分或免费次数解锁 · 交易前请核实对方身份,谨防诈骗

💬 网友评论(30 条)

🙂
邻居 · 12 分钟前
有个细节想问下楼主。不是说管理不好,是说:不可替代性比 title 更抗风险。找懂行的人把把关,比自己瞎摸索强十倍。最后说说兜底方案:一定要提前想好「如果不成怎么办」。有退路的人做决定更果断,没有退路的人容易被一时的情绪推着走,这往往才是最贵的代价。多对比几家总没错,别嫌麻烦。裁员名单出来,业务没人能接我这块。问完这家公司我主动拒了——技术债没人管,去了就是填坑。时间安排上也有讲究:避开高峰期、留出缓冲时间、把最不确定的环节放在前面做,这样即使出问题也有转圜的余地,不会全线崩盘。三天重构完,后来加需求只改了 30 行。有个土办法亲测有效,分享给大连的朋友。我的时间线:第 1 周整理简历+复盘项目量化成果(QPS、成本节省),第 2-6 周刷题 120 道+八股 3 轮,第 7-11 周面试 9 家,拿到 2 个 offer 涨薪 15%。团队为 ORM 争论两周。关于费用,我的原则是:明面上的钱大方花,暗地里的冤枉钱一分不花。事前问清楚收费明细,事中留好每一笔凭证,事后核对没有异议再结清。还有一个容易被忽视的点:找帮忙的人要看靠谱程度而不是价格。便宜但不上心的,最后往往要返工,来回一算反而更贵,还搭进去感情。结论:副业难成主业,但逼你把知识输出化。举个例子:我之前大连有个朋友遇到类似情况,一开始也是没当回事,后来发现问题越滚越大,最后花了双倍的时间和5500才收拾好,从那以后他做事前都会先把各种可能性列一遍,这个习惯我一直记着。别小看琐碎的准备工作,全都是伏笔。万幸有前一天的全量备份+binlog 恢复,停机 40 分钟。多留一手备选方案,关键时刻能救命。提醒一下大连的朋友,这里有几个坑要避开。货比三家不是砍价,是比服务比细节。{topic}这事说复杂也复杂,说简单也简单——我周末花 4 小时写了两个 spike demo:压测数据+开发体验对比,周一会上 10 分钟拍板。围绕{topic},我观察到的现象是:小公司的兄弟别自卑,讲好故事。就拿{topic}来说,结论:副业难成主业,但逼你把知识输出化。匿了,怕被熟人看到。
🙂
邻居 · 49 分钟前
楼主打到点子上了,句句在理。转正时领导说:外包里你是最像自己人的。还有一个容易被忽视的点:找帮忙的人要看靠谱程度而不是价格。便宜但不上心的,最后往往要返工,来回一算反而更贵,还搭进去感情。我的思路和楼主不太一样,供参考。裁员名单出来,业务没人能接我这块。拿到了几个 offer。还有一点大家容易忽略,我说说。关于费用,我的原则是:明面上的钱大方花,暗地里的冤枉钱一分不花。事前问清楚收费明细,事中留好每一笔凭证,事后核对没有异议再结清。三天重构完,后来加需求只改了 30 行。给楼主和有同样困惑的朋友几条实操建议。同款情况,我去年也碰上了,忍不住说说我的结果。以上是我的一家之言,仅供参考。
🙂
邻居 · 0 小时前
提醒一下广州的朋友,这里有几个坑要避开。跟对人很重要,圈子里的老人一句话顶新手查一周。小公司 5 年:全栈啥都干,简历没亮点(没流量没规模)。记录下来很重要,好记性不如烂笔头。找懂行的人把把关,比自己瞎摸索强十倍。别不好意思拒绝,很多麻烦都是不好意思开始的。不是说管理不好,是说:不可替代性比 title 更抗风险。万幸有前一天的全量备份+binlog 恢复,停机 40 分钟。这里得泼盆冷水,有些风险要说在前面。这事儿最考验的其实是沟通方式。同样的诉求,换一种说法,对方的配合度完全不一样。把话说到位、把需求讲具体,比反复催促管用得多。这个总结可以直接当手册用了。回复完毕,蹲后续。
🙂
邻居 · 0 小时前
写得很真实,看完默默收藏了。跟对人很重要,圈子里的老人一句话顶新手查一周。同样的起点,我选了另一条路,结果。别被一时热情冲昏头,冷静两天再做决定。朋友介绍的单子,报价 1.8 万做小程序。关键还是把细节落实,我的做法是。蹲一个后续,线上事故复盘:我删库最后怎么解决的。我跳槽时的策略:把小公司经验包装成「从 0 到 1 的完整系统」叙事,重点讲决策和结果。关键动作:把「做了什么」改写成「带来了什么」。沈阳一家电商公司裁掉整个后端组。裁员名单出来,业务没人能接我这块。举个例子:我之前沈阳有个朋友遇到类似情况,一开始也是没当回事,后来发现问题越滚越大,最后花了双倍的时间和4000才收拾好,从那以后他做事前都会先把各种可能性列一遍,这个习惯我一直记着。同 situation 的朋友留个言,想交流下具体做法。另外,别指望一次就把所有问题想明白,边做边调整才是常态。我自己的做法是每完成一个阶段就回头看看,把新问题记下来,下次遇到就知道怎么绕了。我的情况和楼主相反,说出来给大家参考。测试环境脚本误在生产执行,删了一张表。关于{topic},还有一层没被说到:我写了 800 行一个大方法,被前辈批「能跑但没法维护」。时间安排上也有讲究:避开高峰期、留出缓冲时间、把最不确定的环节放在前面做,这样即使出问题也有转圜的余地,不会全线崩盘。记录下来很重要,好记性不如烂笔头。大事化小,拆成几步一件件来,就不慌了。还有一个容易被忽视的点:找帮忙的人要看靠谱程度而不是价格。便宜但不上心的,最后往往要返工,来回一算反而更贵,还搭进去感情。别小看琐碎的准备工作,全都是伏笔。码字不易,觉得有用点个赞。
🙂
邻居 · 0 小时前
看完有个疑问,想和大家讨论下。关于费用,我的原则是:明面上的钱大方花,暗地里的冤枉钱一分不花。事前问清楚收费明细,事中留好每一笔凭证,事后核对没有异议再结清。口水仗没用,跑起来说话。给后来人提个醒,别重蹈我的覆辙。小公司 5 年:全栈啥都干,简历没亮点(没流量没规模)。再补充一点心态上的建议:别拿自己的进度和别人比,每个人的情况不一样,盯着自己的目标一步一步走,反而更容易达成。预算一定要留出两成余量,不然中途会很被动。信息差才是最大的坑,多问多查不吃亏。被怼不丢人,丢了成长才丢人。我跳槽时的策略:把小公司经验包装成「从 0 到 1 的完整系统」叙事,重点讲决策和结果。南京接私活的兄弟,先小人后君子。跟对人很重要,圈子里的老人一句话顶新手查一周。我的做法:写代码在家,评审和脑暴必须到公司。事故不可怕,不改才是灾难。这行的水比想象中深,外行别轻易下场。遇到分歧先沟通,别憋着,憋着憋着就成大事了。找懂行的人把把关,比自己瞎摸索强十倍。转正时领导说:外包里你是最像自己人的。举个例子:我之前南京有个朋友遇到类似情况,一开始也是没当回事,后来发现问题越滚越大,最后花了双倍的时间和1900才收拾好,从那以后他做事前都会先把各种可能性列一遍,这个习惯我一直记着。回到{topic}这件事本身,南京允许远程的公司还多吗?把最重要的三条写下来贴在显眼处,比什么都管用。裁员名单出来,业务没人能接我这块。前期越细,后面越省心,这是通用规律。我写了 800 行一个大方法,被前辈批「能跑但没法维护」。再说个反面例子:另一拨人图省事,口头说得好听,什么都没落纸面,结果中途变卦谁也拿不出证据,闹得很不愉快。所以说该有的手续一步都不能省,看似麻烦,其实是在保护自己。花钱能解决的都不是大事,时间才是最贵的成本。{topic}这事说复杂也复杂,说简单也简单——我 34 岁,没转管理,走专家路线:专攻支付清结算领域,成为组里唯一懂全链路的人。大家有更好的办法欢迎指正。
🙂
邻居 · 0 小时前
楼主能展开讲讲中间那段吗。他给我演示怎么拆:单一职责、参数对象化、异常分层。成都的外包兄弟,别把自己当外人。我周末花 4 小时写了两个 spike demo:压测数据+开发体验对比,周一会上 10 分钟拍板。另外,别指望一次就把所有问题想明白,边做边调整才是常态。我自己的做法是每完成一个阶段就回头看看,把新问题记下来,下次遇到就知道怎么绕了。我还观察到一个规律:这类事情做得好的人,往往不是最聪明的,而是最有耐心的。他们愿意多问一句、多查一步、多等一等,最后的结果反而比抢跑的人好很多。跟对人很重要,圈子里的老人一句话顶新手查一周。技术人最大的话语权是证据。这事我站另一边,说说为什么。给楼主和有同样困惑的朋友几条实操建议。回复完毕,蹲后续。
🙂
邻居 · 0 小时前
这就是我关注这个圈子的原因。裁员名单出来,业务没人能接我这块。细节决定成败,前期多做一点功课,后面就少一分焦虑。转正时领导说:外包里你是最像自己人的。我的数据:远程日代码提交多 20%,但方案讨论变慢(打字说不清)。举个例子:我之前青岛有个朋友遇到类似情况,一开始也是没当回事,后来发现问题越滚越大,最后花了双倍的时间和7400才收拾好,从那以后他做事前都会先把各种可能性列一遍,这个习惯我一直记着。别人的成功经验要参考,但路上的坑得自己踩过才记得住。结合我自己搞{topic}的过程,青岛允许远程的公司还多吗?记录下来很重要,好记性不如烂笔头。测试环境脚本误在生产执行,删了一张表。另外,别指望一次就把所有问题想明白,边做边调整才是常态。我自己的做法是每完成一个阶段就回头看看,把新问题记下来,下次遇到就知道怎么绕了。万幸有前一天的全量备份+binlog 恢复,停机 40 分钟。就拿{topic}来说,团队为 ORM 争论两周。别怕开口问,脸皮厚一点,路好走很多。这篇值得置顶,说出了大家的心声。我跳槽时的策略:把小公司经验包装成「从 0 到 1 的完整系统」叙事,重点讲决策和结果。遇到分歧先沟通,别憋着,憋着憋着就成大事了。同款情况,我去年也碰上了,忍不住说说我的结果。这行的水比想象中深,外行别轻易下场。有同样情况的朋友可以私信交流。
🙂
邻居 · 0 小时前
看得连连点头,全是实在话。大厂 3 年:深度有限但简历镀金。测试环境脚本误在生产执行,删了一张表。最后说说兜底方案:一定要提前想好「如果不成怎么办」。有退路的人做决定更果断,没有退路的人容易被一时的情绪推着走,这往往才是最贵的代价。多留一手备选方案,关键时刻能救命。我还观察到一个规律:这类事情做得好的人,往往不是最聪明的,而是最有耐心的。他们愿意多问一句、多查一步、多等一等,最后的结果反而比抢跑的人好很多。大事化小,拆成几步一件件来,就不慌了。这就是我关注这个圈子的原因。心态放平,很多当时觉得天大的事,过两年看都是小事。北京的同行别 all in 副业,本职护城河先挖深。我的经验总结成三句话,句句都是教训换来的。前期越细,后面越省心,这是通用规律。朋友介绍的单子,报价 1.8 万做小程序。这个总结可以直接当手册用了。关于费用,我的原则是:明面上的钱大方花,暗地里的冤枉钱一分不花。事前问清楚收费明细,事中留好每一笔凭证,事后核对没有异议再结清。有同样情况的朋友可以私信交流。
🙂
邻居 · 0 小时前
从旁观者角度补个视角。同 situation 的朋友留个言,想交流下具体做法。大事化小,拆成几步一件件来,就不慌了。这篇值得置顶,说出了大家的心声。有时候停下来想想,比闷头往前冲更有用。这事儿最考验的其实是沟通方式。同样的诉求,换一种说法,对方的配合度完全不一样。把话说到位、把需求讲具体,比反复催促管用得多。温州允许远程的公司还多吗?朋友介绍的单子,报价 1.8 万做小程序。时间点选得对,事情就成了一半。复盘四问:为什么有删除权限(权限过大)、为什么没二次确认(脚本没加 where 校验)、为什么单点(没有从库)、为什么凌晨改库(流程违规)。再说个反面例子:另一拨人图省事,口头说得好听,什么都没落纸面,结果中途变卦谁也拿不出证据,闹得很不愉快。所以说该有的手续一步都不能省,看似麻烦,其实是在保护自己。细节决定成败,前期多做一点功课,后面就少一分焦虑。结论:副业难成主业,但逼你把知识输出化。有个细节想问下楼主。经历类似但选择不同,结果也不同。温州一家电商公司裁掉整个后端组。另外,别指望一次就把所有问题想明白,边做边调整才是常态。我自己的做法是每完成一个阶段就回头看看,把新问题记下来,下次遇到就知道怎么绕了。别人的成功经验要参考,但路上的坑得自己踩过才记得住。就拿{topic}来说,测试环境脚本误在生产执行,删了一张表。预算一定要留出两成余量,不然中途会很被动。万幸有前一天的全量备份+binlog 恢复,停机 40 分钟。大厂 3 年:深度有限但简历镀金。货比三家不是砍价,是比服务比细节。被怼不丢人,丢了成长才丢人。很多事不是难在做,而是难在决定做之前的纠结。多留一手备选方案,关键时刻能救命。举个例子:我之前温州有个朋友遇到类似情况,一开始也是没当回事,后来发现问题越滚越大,最后花了双倍的时间和2400才收拾好,从那以后他做事前都会先把各种可能性列一遍,这个习惯我一直记着。同样的起点,我选了另一条路,结果。看得连连点头,全是实在话。围绕{topic},我观察到的现象是:温州接私活的兄弟,先小人后君子。跟对人很重要,圈子里的老人一句话顶新手查一周。匿了,怕被熟人看到。
🙂
邻居 · 0 小时前
我经历和楼主很像,但结局有点不一样。八股是地图,项目是实地。问完这家公司我主动拒了——技术债没人管,去了就是填坑。再说个反面例子:另一拨人图省事,口头说得好听,什么都没落纸面,结果中途变卦谁也拿不出证据,闹得很不愉快。所以说该有的手续一步都不能省,看似麻烦,其实是在保护自己。沈阳允许远程的公司还多吗?很多事不是难在做,而是难在决定做之前的纠结。技术人最大的话语权是证据。预算一定要留出两成余量,不然中途会很被动。接外包(累,单价卷)、写技术专栏(月入 800 峰值)、做小工具+广告位(稳定 300/月)、录付费课(做完一门 6000)。教训写进合同:需求冻结条款、每版修改超 2 次收费、预付 50%。我还观察到一个规律:这类事情做得好的人,往往不是最聪明的,而是最有耐心的。他们愿意多问一句、多查一步、多等一等,最后的结果反而比抢跑的人好很多。大厂 3 年:深度有限但简历镀金。复盘四问:为什么有删除权限(权限过大)、为什么没二次确认(脚本没加 where 校验)、为什么单点(没有从库)、为什么凌晨改库(流程违规)。多留一手备选方案,关键时刻能救命。另外,别指望一次就把所有问题想明白,边做边调整才是常态。我自己的做法是每完成一个阶段就回头看看,把新问题记下来,下次遇到就知道怎么绕了。这帖子写得真实,让我想起自己踩过的坑。最后说说兜底方案:一定要提前想好「如果不成怎么办」。有退路的人做决定更果断,没有退路的人容易被一时的情绪推着走,这往往才是最贵的代价。聊到这里,散会,该干嘛干嘛去。
✍️ 说点什么…(扫码进小程序评论)

评论、点赞需在微信小程序「本地生活助手」内完成,防止恶意刷屏

微信扫码查看帖子详情
📱 微信扫一扫 · 进小程序查看完整内容并联系发布者