Skip to content

  • 体验新版
    • 正在加载...
  • 登录
  • PaddlePaddle
  • Paddle
  • Issue
  • #23392

P
Paddle
  • 项目概览

PaddlePaddle / Paddle
大约 2 年 前同步成功

通知 2325
Star 20933
Fork 5424
  • 代码
    • 文件
    • 提交
    • 分支
    • Tags
    • 贡献者
    • 分支图
    • Diff
  • Issue 1423
    • 列表
    • 看板
    • 标记
    • 里程碑
  • 合并请求 543
  • Wiki 0
    • Wiki
  • 分析
    • 仓库
    • DevOps
  • 项目成员
  • Pages
P
Paddle
  • 项目概览
    • 项目概览
    • 详情
    • 发布
  • 仓库
    • 仓库
    • 文件
    • 提交
    • 分支
    • 标签
    • 贡献者
    • 分支图
    • 比较
  • Issue 1,423
    • Issue 1,423
    • 列表
    • 看板
    • 标记
    • 里程碑
  • 合并请求 543
    • 合并请求 543
  • Pages
  • 分析
    • 分析
    • 仓库分析
    • DevOps
  • Wiki 0
    • Wiki
  • 成员
    • 成员
  • 收起侧边栏
  • 动态
  • 分支图
  • 创建新Issue
  • 提交
  • Issue看板
已关闭
开放中
Opened 4月 01, 2020 by saxon_zh@saxon_zhGuest

elementwise_add:parallel_for failed: invalid configuration argument

Created by: xygaoyuan

请问下,这个错误一般是什么问题造成的? 目前是在我这边的预测程序里面出错(预测run的时候),并且和我的预测数据有关系,一个测试集共9000多个样本一起预测没问题,单独预测某一条就会报这个错误。

错误信息如下: W0401 22:25:03.523263 76374 operator.cc:181] elementwise_add raises an exception thrust::system::system_error, parallel_for failed: invalid configuration argument /home/users/gaoyuan09/jumbo.gpu/lib/python2.7/site-packages/paddle/fluid/executor.py:773: UserWarning: The following exception is not an EOF exception. "The following exception is not an EOF exception.") Traceback (most recent call last): File "ernie/run_sequence_labeling.py", line 489, in main(args) File "ernie/run_sequence_labeling.py", line 335, in main steps) File "ernie/run_sequence_labeling.py", line 407, in predict_wrapper res = predict(exe, test_prog, test_pyreader, graph_vars, dev_count=1) File "/home/users/gaoyuan09/bert/ERNIE-develop.multi-task.knowledge.add_subword_mean_pool.routine.add_multi_head_attention.cand_use_multi_head_attention.gated_knowledge_fusion.ontonotes.add_label_predict_by_mem.bert.multitask/ernie/finetune/sequence_label.py", line 696, in predict return_numpy=False) File "/home/users/gaoyuan09/jumbo.gpu/lib/python2.7/site-packages/paddle/fluid/executor.py", line 774, in run six.reraise(*sys.exc_info()) File "/home/users/gaoyuan09/jumbo.gpu/lib/python2.7/site-packages/paddle/fluid/executor.py", line 769, in run use_program_cache=use_program_cache) File "/home/users/gaoyuan09/jumbo.gpu/lib/python2.7/site-packages/paddle/fluid/executor.py", line 816, in _run_impl use_program_cache=use_program_cache) File "/home/users/gaoyuan09/jumbo.gpu/lib/python2.7/site-packages/paddle/fluid/executor.py", line 890, in run_program fetch_var_name) RuntimeError: parallel_for failed: invalid configuration argument F0401 22:25:04.606678 76374 device_context.cc:334] cudaGetLastError invalid configuration argument errno: 9

* Check failure stack trace: *

@ 0x7f96d603e1ad google::LogMessage::Fail() @ 0x7f96d6041c5c google::LogMessage::SendToLog() @ 0x7f96d603dcd3 google::LogMessage::Flush() @ 0x7f96d604316e google::LogMessageFatal::~LogMessageFatal() @ 0x7f96d6136737 paddle::platform::CUDADeviceContext::Wait() @ 0x7f96d60e7d92 paddle::framework::ParallelExecutor::~ParallelExecutor() @ 0x7f96d5eaff1a pybind11::class<>::dealloc() @ 0x7f96d5ef34dc pybind11::detail::clear_instance() @ 0x7f96d5ef36af pybind11_object_dealloc @ 0x45878f dict_dealloc @ 0x47b396 subtype_dealloc @ 0x45878f dict_dealloc @ 0x47b396 subtype_dealloc @ 0x45878f dict_dealloc @ 0x47b396 subtype_dealloc @ 0x52fcd2 frame_dealloc @ 0x4f2f4b tb_dealloc @ 0x4f2f5b tb_dealloc @ 0x459cf7 insertdict @ 0x45d0a1 PyDict_SetItemString @ 0x4d1e91 PyImport_Cleanup @ 0x4e9aa5 Py_Finalize.part.3 @ 0x41573f Py_Main @ 0x7f97c681bbd5 __libc_start_main @ 0x414e01 (unknown) @ (nil) (unknown) Aborted
指派人
分配到
无
里程碑
无
分配里程碑
工时统计
无
截止日期
无
标识: paddlepaddle/Paddle#23392
渝ICP备2023009037号

京公网安备11010502055752号

网络110报警服务 Powered by GitLab CE v13.7
开源知识
Git 入门 Pro Git 电子书 在线学 Git
Markdown 基础入门 IT 技术知识开源图谱
帮助
使用手册 反馈建议 博客
《GitCode 隐私声明》 《GitCode 服务条款》 关于GitCode
Powered by GitLab CE v13.7