首页 Paddle框架 帖子详情
windows下训练卡死
收藏
快速回复
Paddle框架 问答深度学习模型训练 1489 1
windows下训练卡死
收藏
快速回复
Paddle框架 问答深度学习模型训练 1489 1
  • 版本、环境信息:
       1)PaddlePaddle版本:1.6.1
       2)GPU:NVIDIA Geforce GTX 1660 Ti, CUDA 10.0.130, cuDNN 7.6
       4)系统环境:Windows 10, Python 3.7.5 64bit

  • 训练信息
       1)单机
       2)显存信息
       3)使用PaddleDetection的Yolov3模型

  • 复现信息:
    1

  • 问题描述:
    开始训练后不久就会出现卡死现象,训练步数不定,有时几百步,有时几千就会卡死不动。

Thank you for contributing to PaddlePaddle.
Before submitting the issue, you could search issue in the github in case that there was a similar issue submitted or resolved before.
If there is no solution,please make sure that this is a training issue including the following details:
System information
-PaddlePaddle version (eg.1.1)or CommitID
-CPU: including CPUMKL/OpenBlas/MKLDNN version
-GPU: including CUDA/CUDNN version
-OS Platform (eg.Mac OS 10.14)
-Other imformation: Distriuted training/informantion of operator/
Graphics card storage
To Reproduce
Steps to reproduce the behavior
Describe your current behavior
Code to reproduce the issue
Other info / logs

0
收藏
回复
全部评论(1)
时间顺序
AIStudio791346
#2 回复于2019-11

你好,我们已经发现cudaStreamSynchronize API在windows平台会出现随机hang的问题,目前已经提交PR #21201

0
回复
需求/bug反馈?一键提issue告诉我们
发现bug?如果您知道修复办法,欢迎提pr直接参与建设飞桨~
在@后输入用户全名并按空格结束,可艾特全站任一用户