【yolo系列:运行报错RuntimeError: CUDA error: an illegal memory access was encountered CUDA kernel errors m】

项目场景:

使用yolov7训练数据集,但是训练到一半就开始停止了并且报错

RuntimeError: CUDA error: an illegal memory access was encountered
CUDA kernel errors might be asynchronously reported at some other API call,so the stacktrace below might be incorrect.
For debugging consider passing CUDA_LAUNCH_BLOCKING=1.

问题描述

使用yolov7训练数据集,训练过半报错。
在这里插入图片描述

原因分析:

提示:这里填写问题的分析:

这通常是由以下几种原因之一引起的:

内存溢出:模型或数据可能太大,无法适应GPU内存。这会导致CUDA错误。可以减小批量大小、减小模型规模或使用更小的输入图像来减少内存使用。
GPU驱动问题:有时,过时的或不稳定的GPU驱动程序可能导致CUDA错误。更新PU驱动程序到最新版本,或者回滚到一个较稳定的版本。

解决方案:

提示:这里填写该问题的具体解决方案:

CUDA_LAUNCH_BLOCKING:根据错误消息的建议,设置环境变CUDA_LAUNCH_BLOCKING=1。
在系统环境变量里面设置如上的
在这里插入图片描述
然后重启电脑即可。

猜你喜欢

转载自blog.csdn.net/weixin_47869094/article/details/132722640