1)安装环境是否正确;2)本地GPU跑FINETUNE提示Out of memory error
Created by: yocen
环境描述及其问题:
1)PaddlePaddle版本: anaconda虚拟环境中用conda安装paddlepaddle1.7GPU版本, 当时是按照paddle官网用conda install paddlepaddle-gpu cudatoolkit=10.0安装的, 安装后验证安装成功。 pip安装paddlehub1.6.0,安装后用conda list 展示出来的是这样: paddlehub 1.6.0 pypi_0 pypi paddlepaddle-gpu 1.7.0.post107 pypi_0 pypi 这里的问题是,paddlepaddle-gpu怎么变成了用pypi安装? 而且,在jupyter每次restart kernel,首次import paddle.fluid时,会弹出 这些是因为环境混乱造成的吗? 2)GPU:940MX 2G; CUDA: V10.0.130; CUDNN:7.6.5.32 3)系统环境:WIN10 64BIT家庭版(家庭版到底能不能通过conda安装paddlepaddle?)
FINETUNE资源不足问题描述:
使用业余显卡,能用GPU跑senta-bilstm的预训练模型进行预测。 但不能finetune,设置 os.environ['FLAGS_fraction_of_gpu_memory_to_use']='0.95', batchsize=2 都会提示资源不足。 完整代码、错误信息见附件ERRLOG.ZIP: ERRLOG.zip
同样的代码,我拿去AI STUDIO的GPU环境里试了下,并且设置了os.environ['FLAGS_fraction_of_gpu_memory_to_use']='0.01', batchsize=32 都能FINETUNE成功。 如果是因为我本地的显卡2G显存不够,那为什么在AI STUDIO上,即使 设了这么小的可用显存都能FINETUNE?谢谢。