V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
taylorsfan
V2EX  ›  职场话题

生产环境出了问题,直接责任人是我,现在都在排查原因,我心里很慌,应该怎么办,求支招。

  •  
  •   taylorsfan · 2020-01-19 11:03:54 +08:00 · 9035 次点击
    这是一个创建于 1774 天前的主题,其中的信息可能已经有所发展或是发生改变。
    第 1 条附言  ·  2020-01-19 18:22:39 +08:00
    经过一整天系统的排查,发现受到影响的数据不算是重要数据(不会影响系统正常流程),已经出错的数据之后再做维护,我的心也是彻底落了下来。感谢🙏🙏🙏各位的安慰以及支招
    62 条回复    2020-01-20 17:23:55 +08:00
    taylorsfan
        1
    taylorsfan  
    OP
       2020-01-19 11:08:31 +08:00
    关键是下午还想去面试,感觉自己现在心态爆炸
    MrJeff
        2
    MrJeff  
       2020-01-19 11:10:36 +08:00
    写好 CaseStudy🐶
    3789
        3
    3789  
       2020-01-19 11:18:40 +08:00 via Android
    表面荒🉐一匹,实则稳如老狗🐶
    taylorsfan
        4
    taylorsfan  
    OP
       2020-01-19 11:22:05 +08:00
    影响范围很大,半个月的数据都有问题,现在正在想补救措施,脑子都大了🤦‍
    zhangdszq
        5
    zhangdszq  
       2020-01-19 11:23:29 +08:00   ❤️ 1
    事情出了慌也没用, 像解题一样一步步解决
    taylorsfan
        6
    taylorsfan  
    OP
       2020-01-19 11:23:31 +08:00
    还有一个 kai men hong,预计 50w 条数据有问题。
    shiran3f
        7
    shiran3f  
       2020-01-19 11:24:49 +08:00   ❤️ 2
    慌也改变不了客观事实,别想太多,态度强势一点,然后如果是尽职状态了,那也没什么好担心了,挺直腰板做好应急措施和事后。出问题不担心,第一时间控制损失,控制住了就快点恢复,之后就说我们的恢复流程、恢复效率怎么怎么强。下次怎么改进。其他的就是该怎么奖惩怎么奖惩了,听 kan 天 lao 由 ban 命 xin 了 qing。
    guojiaxiang
        8
    guojiaxiang  
       2020-01-19 11:25:05 +08:00
    @taylorsfan 测试让过的[狗头]
    misaka19000
        9
    misaka19000  
       2020-01-19 11:26:08 +08:00
    有啥好慌的,先想着解决,解决不了大不了被开除,多大点事
    moyupoi
        10
    moyupoi  
       2020-01-19 11:29:18 +08:00 via iPhone   ❤️ 3
    慌说明你有责任心,对事情负责,如果承受不住就先把面试延期先解决当前的问题,如果能兼顾,就该去面试去面试,外一面上也给自己留条后路
    taylorsfan
        11
    taylorsfan  
    OP
       2020-01-19 11:30:06 +08:00
    @misaka19000 我只是怕背赔偿责任 (WAI BAO),开除倒是小问题
    fewok
        12
    fewok  
       2020-01-19 11:35:29 +08:00
    先讲清楚最坏情况的影响。
    gzchen
        13
    gzchen  
       2020-01-19 11:37:54 +08:00
    影响大的话,赔偿跑不了咯
    twl007
        14
    twl007  
       2020-01-19 12:08:30 +08:00
    准确来说这部是团队的问题么 为什么会是你个人的责任?
    lovedebug
        15
    lovedebug  
       2020-01-19 12:12:46 +08:00 via Android
    测试呢?怎么测的?没自动化?没 act ?没 e2e ?流程呢?没监控?没 critical log ?没人看线上日志?背锅也轮不到你呀。我感觉是项目发布流程的问题
    dxgundam01
        16
    dxgundam01  
       2020-01-19 12:36:29 +08:00 via Android
    让外包做直接负责人,甲方做什么?
    renmu
        17
    renmu  
       2020-01-19 12:37:02 +08:00 via Android
    代码 review 呢,测试呢,背锅也轮不到你,不要慌
    Perry
        18
    Perry  
       2020-01-19 12:37:38 +08:00 via iPhone   ❤️ 1
    这种让责任人背锅的公司不待也罢
    mmdsun
        19
    mmdsun  
       2020-01-19 12:41:40 +08:00 via Android   ❤️ 3
    代码 bug 有不是很正常么。

    还要让程序员赔钱?

    (那医生治死人了岂不是要偿命。
    otakustay
        20
    otakustay  
       2020-01-19 12:44:25 +08:00   ❤️ 3
    赔偿是不可能赔偿的,大不了直接走人,公司他有本身法律上索赔,我不信哪家法院会支持。问题出了就一定先解决问题,解决完了再慌也不迟
    sampeng
        21
    sampeng  
       2020-01-19 12:52:45 +08:00
    按你这个思路。。。谁敢做运维?
    出一丢丢事就是删库跑路?
    deorth
        22
    deorth  
       2020-01-19 13:15:58 +08:00   ❤️ 1
    不要方,问题很大,方也没用
    sadfQED2
        23
    sadfQED2  
       2020-01-19 13:24:07 +08:00 via Android
    50w 数据,手工改,一天改 1 万条,两个月改完🐶🐶🐶🐶狗头保命
    moyupoi
        24
    moyupoi  
       2020-01-19 13:26:08 +08:00 via iPhone
    开个权限让 V2EX 每个人改 10 条,一天就改完,能不能用就不知道了…
    glaucus
        25
    glaucus  
       2020-01-19 13:26:20 +08:00   ❤️ 2
    看似慌得一批,实则还有空来 V 站水贴
    guojiaxiang
        26
    guojiaxiang  
       2020-01-19 13:56:44 +08:00   ❤️ 1
    @glaucus 天塌下来也不能影响水贴
    wdytoya
        27
    wdytoya  
       2020-01-19 14:03:50 +08:00
    看似慌得一批,实则稳如老狗
    CEBBCAT
        28
    CEBBCAT  
       2020-01-19 14:24:30 +08:00   ❤️ 1
    一个完善的公司,应该是一个不会出错的公司,如果靠出错时致力于把错误的螺丝消灭,那么这家机器已经走在了自我毁灭的路上

    拿多少钱,担多少责。中学老师教过:义务 <-> 权力,我想在这里也是同理
    cnoder
        29
    cnoder  
       2020-01-19 14:26:32 +08:00
    拿多少钱,担多少责
    KuroNekoFan
        30
    KuroNekoFan  
       2020-01-19 14:28:39 +08:00
    出了问题不是先回滚吗
    tyrantZhao
        31
    tyrantZhao  
       2020-01-19 14:37:55 +08:00
    没事的,我之前删表都没事。。。。
    tabris17
        32
    tabris17  
       2020-01-19 14:39:57 +08:00
    你只是打工的,不用承担赔偿责任
    blackccc
        33
    blackccc  
       2020-01-19 14:43:05 +08:00
    看似慌得一批,实则还有空来 V 站水贴
    luozic
        34
    luozic  
       2020-01-19 14:45:20 +08:00 via iPhone
    慌个啥? fmea 分析中问题只讲在哪里发生的还搞个屁?
    cs3230524
        35
    cs3230524  
       2020-01-19 15:07:53 +08:00
    rm -rf /*
    oneisall8955
        36
    oneisall8955  
       2020-01-19 15:44:03 +08:00
    删库跑路吧
    cxh116
        37
    cxh116  
       2020-01-19 15:44:15 +08:00 via Android
    公司都是有限责任公司,生产事故轮不到一个底层员工来背全责。
    a1044634486
        38
    a1044634486  
       2020-01-19 15:46:26 +08:00 via Android
    让负责人收下的人背锅
    westoy
        39
    westoy  
       2020-01-19 15:49:47 +08:00
    那更得抓紧面试了...
    Mac
        40
    Mac  
       2020-01-19 15:51:01 +08:00
    谁验收谁负责啊
    NoString
        41
    NoString  
       2020-01-19 15:56:34 +08:00
    不要慌 我也出过同类型错,认真排查,先止损,再上补丁,最后至于是被 GANK 还是 FIRE 听天由命了
    CeresLC
        42
    CeresLC  
       2020-01-19 16:33:37 +08:00
    先解决问题,然后写问题报告,完事!
    都已经发生了慌什么啊
    1109599636
        43
    1109599636  
       2020-01-19 16:37:36 +08:00
    @mmdsun 你这比喻不行🙅‍♂️医生治死人是要赔钱的
    Huizhen
        44
    Huizhen  
       2020-01-19 16:45:20 +08:00
    @taylorsfan 开门红? 华夏?
    Huizhen
        45
    Huizhen  
       2020-01-19 16:45:43 +08:00
    @Huizhen 竹简?
    Erroad
        46
    Erroad  
       2020-01-19 16:48:23 +08:00
    拿多少钱,担多少责。现在就当问题不是自己的,慢慢查原因,想办法洗数据就好了。我今年搞了两三次这种事情了,每次都是百万单级别,责任不全是我的,年终奖也照样拿
    l8g
        47
    l8g  
       2020-01-19 17:09:44 +08:00
    最多开除,又不会让你赔偿,慌个啥。生产出了问题,整个链路都背锅,不会只有你一个人的责任。
    而且真出了大问题,你自己都不会想在这家公司待下去,况且你本身也在面试了。
    先把这个线上问题解决好,再想之后的事情吧。
    wupher
        48
    wupher  
       2020-01-19 17:14:14 +08:00   ❤️ 1
    那你还有心情在 V2EX 发贴?

    你要真担心后果,不如现在先去找律师咨询一下更靠谱。

    不懂你的角色,如果你只是一个普通员工,安心,最多只能开除你,貌似你对这个不怎么怕。

    如果你是外包承接方,这个要看你们之间合同具体怎么签的了。详情你咨询律师最妥当。如果你们连合同都没签,你就干个给钱写代码的活,那估计更没什么事。

    除此之外,认真协助排查故障原因也是你的责任和道德吧,祝你好运,预祝春节快乐。
    zhouwei520
        49
    zhouwei520  
       2020-01-19 17:19:29 +08:00
    你得老板比你更慌,他们会处理的
    xuanxuan11
        50
    xuanxuan11  
       2020-01-19 17:24:08 +08:00
    表面慌,心里稳,忍不住在这里炫耀起来了,人呐
    xiaoyang7545
        51
    xiaoyang7545  
       2020-01-19 17:31:41 +08:00
    嗨呀,这种事情最终不都是随便最后找个测试小弟背锅吗。
    yEhwG10ZJa83067x
        52
    yEhwG10ZJa83067x  
       2020-01-19 17:40:52 +08:00
    赔钱是真的吗?扣年终绩效还可以理解,还需要自己赔钱?那得开多高的工资啊
    taylorsfan
        53
    taylorsfan  
    OP
       2020-01-19 18:17:43 +08:00
    @d892fc 大哥,出问题了还会炫耀么,这整的我也太那啥了吧
    lights
        54
    lights  
       2020-01-19 18:51:55 +08:00
    当你真的经历过
    - 正在搞活动,但是你开发的登陆接口突然不能登陆了
    - 正在搞活动,但是官网直接被你 rm -rf 了
    - 快要搞活动,但是数据库被你搞 crash 了,最新的数据找不回了
    的时候,你就不会再慌了
    reus
        55
    reus  
       2020-01-19 20:46:33 +08:00 via Android
    赔偿?让公司直接起诉你,看法院支持不支持。
    zixianlaiye
        56
    zixianlaiye  
       2020-01-19 20:48:44 +08:00
    @lights 说出你的故事
    aaahhh123
        57
    aaahhh123  
       2020-01-19 22:15:04 +08:00
    开门红? bao xian 公司?
    wangyzj
        58
    wangyzj  
       2020-01-19 22:43:39 +08:00
    当你 rm -f /后就不慌了
    MoccaCafe
        59
    MoccaCafe  
       2020-01-20 08:39:43 +08:00 via iPhone
    我以前也犯过错误,以为会赔掉整个身家,但说实话,每个月拿那一点钱,还不够老板包 2nai 的小费呢,赔偿是不可能的,钱都没给够
    Eugene1024
        60
    Eugene1024  
       2020-01-20 08:59:34 +08:00
    慌也没用,还不如认真仔细分析下问题,做好补救
    Varobjs
        61
    Varobjs  
       2020-01-20 10:10:20 +08:00
    慌个毛,又不是没测试。。。
    曾经我写一半的东西,被别人上线了,损失十几万,居然第一责任人是我。
    MissThee
        62
    MissThee  
       2020-01-20 17:23:55 +08:00
    @wangyzj 已经没什么好怕的了
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   5851 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 30ms · UTC 01:48 · PVG 09:48 · LAX 17:48 · JFK 20:48
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.