Tensorflow中遇到resourceExhausted OOM when allocating tensor

Tensorflow中遇到resourceExhausted OOM

1.表明内存溢出，在查看发现有另外一个训练程序与之争抢资源，停掉，在重新给训练任务分配GPU，避免争抢，问题解决
2.调低训练参数，降低训练的强度
3.GPU OOM，没法分配那么多显存来搞定accuracy evaluation，因此需要改成批处理。