基于参数服务器的节点处理方法、装置、设备及存储介质
基于参数服务器的节点处理方法、装置、设备及存储介质
来源:北方有色网
访问:1076
简介:
本发明涉及大数据技术领域,并公开了一种基于参数服务器的节点处理方法,包括:获取参数服务器的全局资源信息,以构建动态全局任务图表;基于所述动态全局任务图表,检测所述全局资源信息中是否存在失效节点;若是,则将所述失效节点对应的运算任务判定为失效任务;将所述失效任务部署到所述失效任务对应的失效节点以外的节点。本发明还公开了一种基于参数服务器的节点处理装置、设备和存储介质。本发明通过构建动态全局任务图表,使得第二运算任务相关的信息都添加到图表中,在发现存在失效节点时,为了保证任务不中断,能够及时有效的将失效任务部署到失效任务对应的失效节点以外的节点,使得失效节点以外的节点能够继续完成任务。
本发明涉及大数据技术领域,并公开了一种基于参数服务器的节点处理方法,包括:获取参数服务器的全局资源信息,以构建动态全局任务图表;基于所述动态全局任务图表,检测所述全局资源信息中是否存在失效节点;若是,则将所述失效节点对应的运算任务判定为失效任务;将所述失效任务部署到所述失效任务对应的失效节点以外的节点。本发明还公开了一种基于参数服务器的节点处理装置、设备和存储介质。本发明通过构建动态全局任务图表,使得第二运算任务相关的信息都添加到图表中,在发现存在失效节点时,为了保证任务不中断,能够及时有效的将失效任务部署到失效任务对应的失效节点以外的节点,使得失效节点以外的节点能够继续完成任务。
标签:失效分析
宣传
宣传
宣传
顶部