踩坑 gpu跑到一个epoch就停了不跑了。。。

来源:互联网 发布:中国家庭收入调查数据 编辑:程序博客网 时间:2024/04/29 16:07

两块gpu一起跑,同样的代码,数据集,但是就是有一块在一个epoch后就停了,gpu不工作了。。。

原因:在你排除掉代码原因和硬件搭建错误后,只可能是,硬盘读数据不给力了。。。。


昨晚一样的情况,卡了一夜没好。今天把数据放固态硬盘上,卡了蛮久就gpu接着工作了。。。。

所以,不是gpu的锅,怪硬盘读数据不给力了。。。。。7w x 2 的数据量啊。。。。

原创粉丝点击