zoukankan      html  css  js  c++  java
  • 云计算之路-阿里云上:一夜之间竞价服务器全没了团队

    最近我们在服务器部署上使用了一些阿里云竞价服务器,比如在负载均衡中使用包年包月服务器与竞价服务器相结合,服务器部署调整时先用竞价服务器临时顶替一下。使用竞价服务器最大的风险是随时可能会被释放,今天之前我们只遇到过1次竞价服务器被释放的情况,那次被释放了2台,也是在周五,看来周五是一个竞价的高峰,使用竞价服务器的朋友需留意。

    今天早晨我们吃惊的发现,所有的竞价服务器全没了,一丝痕迹都没有留下,只有 5:35 收到的多条告别短信:

    【阿里云】尊敬的用户,您好!您竞价购买的实例: i-bp1glob57mdslykpz2vq即将进入释放状态,请您登录云主机保存系统内数据。谢谢

    原来所有的竞价服务器同时被释放了,无一幸免。

    这些服务器的不辞而别,本来不会带来问题。可是,不争气的 docker swarm 不能正确面对朝夕相伴的老友不辞而别,在剩下 3 个 manager 节点的情况下,在早上的访问低峰 7:20 左右竟然宕机了。。。我们发现后,本以为在这样的访问低峰重启节点可以恢复,结果不凑效,只能重建集群,在重建集群又遇到了麻烦,一直到 8:20 左右才恢复正常。

    与此同时,由于昨天忙于处理故障,我们的找找看索引服务器未及时由竞价服务器更换为包月服务器也被释放了,造成搜索站点故障,到 9:15 左右才恢复。

    又要和大家说抱歉,请大家再次谅解由此给您带来的麻烦!

    有时真的很奇怪,问题们似乎商量好的结伴而来,让人难以招架,但我们知道每当出现这样的问题们的团聚,是对我们解决问题能力的考验与挑战,只要战胜它们,就是一次成长的飞跃。

  • 相关阅读:
    How to change hostname on SLE
    How to install starDIct on suse OS?
    python logging usage
    How to reset password for unknow root
    How to use wget ?
    How to only capute sub-matched character by grep
    How to inspect who is caller of func and who is the class of instance
    How to use groovy script on jenkins
    Vim ide for shell development
    linux高性能服务器编程 (二) --IP协议详解
  • 原文地址:https://www.cnblogs.com/cmt/p/8580386.html
Copyright © 2011-2022 走看看