携程:宕机事件系员工误操作

来源:百度文库 编辑:超级军网 时间:2024/04/28 07:39:13
携程:宕机事件系员工误操作
来源:2015-05-29 07:16 新浪科技
  新浪科技讯 5月29日消息,今天凌晨1:30分,经携程技术排查向新浪科技确认此次事件是由于员工错误操作导致。
  对于恢复时间较长,携程回应称,因涉及的业务、应用及服务繁多,验证应用与服务之间的功能是否正常运行,花了较长时间。携程官方网站及APP已于28日23:29全面恢复正常。(伊凡)
  以下为携程对相关问题的说明:
  1、事件发生原因
  经携程技术排查,确认此次事件是由于员工错误操作,删除了生产服务器上的执行代码导致。
  2、为什么恢复时间那么长
  一般来说,类似携程这样的大型网站承载着繁多业务,其后台是一个由SOA(面向服务)架构组成的庞大服务器集群,看似简单的一个页面背后由上千个应用子系统以及上千个Web Service组成,而每个应用子系统和每个Web Service之间都存在着相互调用的依赖关系。
  发生事件后,携程的技术人员除了需要恢复生产服务器上的执行代码以外,还需要做的是恢复并确保每个应用子系统以及每个Web Service的功能正常,同时确保应用子系统与Web Service间的调用关系得以正常执行。
  这种验证性的操作需要携程的工程师及运维人员通力合作,尽快恢复生产代码并通过反复地、持续性地调试以确保应用子系统与Web Service功能的正常运行。
  携程再次保证,数据和数据库并未受到此次事件的影响,用户订单数据也完整无损,请用户放心并继续使用携程网站及App。
  3、如何杜绝此类事件的再次发生?
  携程在系统上做了改进,规范并杜绝技术人员错误删除生产服务器上代码的操作。携程:宕机事件系员工误操作
来源:2015-05-29 07:16 新浪科技
  新浪科技讯 5月29日消息,今天凌晨1:30分,经携程技术排查向新浪科技确认此次事件是由于员工错误操作导致。
  对于恢复时间较长,携程回应称,因涉及的业务、应用及服务繁多,验证应用与服务之间的功能是否正常运行,花了较长时间。携程官方网站及APP已于28日23:29全面恢复正常。(伊凡)
  以下为携程对相关问题的说明:
  1、事件发生原因
  经携程技术排查,确认此次事件是由于员工错误操作,删除了生产服务器上的执行代码导致。
  2、为什么恢复时间那么长
  一般来说,类似携程这样的大型网站承载着繁多业务,其后台是一个由SOA(面向服务)架构组成的庞大服务器集群,看似简单的一个页面背后由上千个应用子系统以及上千个Web Service组成,而每个应用子系统和每个Web Service之间都存在着相互调用的依赖关系。
  发生事件后,携程的技术人员除了需要恢复生产服务器上的执行代码以外,还需要做的是恢复并确保每个应用子系统以及每个Web Service的功能正常,同时确保应用子系统与Web Service间的调用关系得以正常执行。
  这种验证性的操作需要携程的工程师及运维人员通力合作,尽快恢复生产代码并通过反复地、持续性地调试以确保应用子系统与Web Service功能的正常运行。
  携程再次保证,数据和数据库并未受到此次事件的影响,用户订单数据也完整无损,请用户放心并继续使用携程网站及App。
  3、如何杜绝此类事件的再次发生?
  携程在系统上做了改进,规范并杜绝技术人员错误删除生产服务器上代码的操作。
http://tech.sina.cn/i/gn/2015-05-29/detail-iawzuney6358351.d.html?vt=1&pos=18
看来知呼那个段子是真的了。
按照携程一季度财报公布的数据,携程宕机的损失为平均每小时106.48万美元,这次超11小时,呵呵,那位误操作的兄台,自求多福吧。
mv1905 发表于 2015-5-29 08:09
按照携程一季度财报公布的数据,携程宕机的损失为平均每小时106.48万美元,这次超11小时,呵呵,那位误操作 ...
就是个被开的结果.
mv1905 发表于 2015-5-29 08:09
按照携程一季度财报公布的数据,携程宕机的损失为平均每小时106.48万美元,这次超11小时,呵呵,那位误操作 ...
应该上了黑名单,在业内无法继续混下去了
这么重要的生产系统双人复核操作,操作权限分级制这类安全措施是必须的吧?要怎么样的员工误操作才能搞到现在这模样?不要告诉我这是一个员工就可以办到的事。
这么重要的生产系统双人复核操作,操作权限分级制这类安全措施是必须的吧?要怎么样的员工误操作才能搞到现 ...
典型的黑天鹅事件。
细蓉云吞面 发表于 2015-5-29 10:59
这么重要的生产系统双人复核操作,操作权限分级制这类安全措施是必须的吧?要怎么样的员工误操作才能搞到现 ...
省一个员工,省不少钱呢
省一个员工,省不少钱呢
估计要省3个吧。。。人家请假,休息啥的不可能空岗吧
是不是奖金、工资没给够啊{:soso_e120:}
happywar 发表于 2015-5-29 13:33
是不是奖金、工资没给够啊
说不定某钓丝男的妹纸被老板泡走呢
fkcnn 发表于 2015-5-29 12:38
估计要省3个吧。。。人家请假,休息啥的不可能空岗吧
一个也没省,我估计是另外一个同事用携程订了个房间,去啪啪啪了,为不影响工作和娱乐,就把密码告诉给那个操作同事,谁知道那个同事搞砸了事情.