系统健壮性的思考

一、概述

最近系统有两个故障都跟系统健壮有很大的关系。为此，我们不得不进行思考，如何提高系统的健壮性。系统在经过功能测试后，对于正常的业务数据处理往往没有任何的问题，但是对于一些异常的数据、异常的业务处理就会出现系统集群不可用等灾难性的问题。

• 异常的数据一般是因为系统的数据修正引起，往往在存储方面就不符合业务一致性约束。对于一些有年代的系统，数据修正又不可少，在我就职的部门中，每天都在进行着数据修正。如果有位开发因为数据修正，导致整个集群挂掉了，这是很悲剧的。有人说，一切都是数据修正的错，如果没有数据修正，系统能很好的运行，但是现实的问题是，每天必须得数据修正。
• 另一个是异常的业务，其实也是一个修正，我们认为业务部门没有按照要求来使用我们的系统，业务方乱来，或者是开发又一个不经意的业务修正。