人工智能系统中流水行并行的GPU配置方法及系统
首页 企业 产品 技术 资讯 图库 视频 需求 会议 活动 产业
人工智能系统中流水行并行的GPU配置方法及系统
来源:北方有色网
访问:972
简介: 本发明公开了一种人工智能系统中流水行并行的GPU配置方法及系统,其针对共享GPU集群,并应用于神经网络分布式训练。为了解决共享GPU集群下流水行并行中GPU分配方案固定不变而导致无法动态调节GPU配置的问题,所述方法在下一次的训练之前,根据静态指标、动态指标得到若干新工作分区,在动态指标中加入GPU的可用带宽,使得新工作分区能反应GPU的动态可用资源;再引入了元网络预测每个工作分区的训练速度来筛选工作分区,及引入强化学习来判断是否更新当前的工作分区,通过上述GPU配置方法得到的工作分区能适应于GPU的动态可用资源,更合理的进行分布式训练,有效提高GPU资源利用率以及保证后续神经网络的训练效率。
本发明公开了一种人工智能系统中流水行并行的GPU配置方法及系统,其针对共享GPU集群,并应用于神经网络分布式训练。为了解决共享GPU集群下流水行并行中GPU分配方案固定不变而导致无法动态调节GPU配置的问题,所述方法在下一次的训练之前,根据静态指标、动态指标得到若干新工作分区,在动态指标中加入GPU的可用带宽,使得新工作分区能反应GPU的动态可用资源;再引入了元网络预测每个工作分区的训练速度来筛选工作分区,及引入强化学习来判断是否更新当前的工作分区,通过上述GPU配置方法得到的工作分区能适应于GPU的动态可用资源,更合理的进行分布式训练,有效提高GPU资源利用率以及保证后续神经网络的训练效率。
0
0
0
0
0
         
标签:化学分析
广州铭谦选矿设备有限公司宣传
广州铭谦选矿设备有限公司宣传
相关技术
评论(0条)
200/200
牛津仪器科技(上海)有限公司宣传
发布
技术

顶部
北方有色网-互联网服务平台-关于我们
Copyright 2025 China-mcc.com All Rights Reserved
备案号:京ICP备11044340号-3
电信业务经营许可证编号:京B2-20242293
京公网安备 11010702002294号