简介： 本发明揭示用于容许通信网格中的故障的设备、系统和方法。具体来说，提供各种技术和系统以用于在通信网格中检测计算机节点的网络中的节点的故障或失效；调整所述网格以避免网格失效；以及基于所述失效采取行动。在实例中，系统可包含在备份控制节点处接收网格状态信息，所述网格状态信息包含项目状态；将所述网格状态信息存储在所述备份控制节点内；接收包含主要控制节点已失效的指示的失效通信；将所述备份控制节点指定为新主要控制节点；基于所述主要控制节点已失效的所述指示而接收经更新的网格状态信息；以及基于所述经更新的网格状态信息而传输指令集。