Skip to content

  • 体验新版
    • 正在加载...
  • 登录
  • PaddlePaddle
  • ERNIE
  • Issue
  • #94

E
ERNIE
  • 项目概览

PaddlePaddle / ERNIE
大约 2 年 前同步成功

通知 115
Star 5997
Fork 1271
  • 代码
    • 文件
    • 提交
    • 分支
    • Tags
    • 贡献者
    • 分支图
    • Diff
  • Issue 29
    • 列表
    • 看板
    • 标记
    • 里程碑
  • 合并请求 0
  • Wiki 0
    • Wiki
  • 分析
    • 仓库
    • DevOps
  • 项目成员
  • Pages
E
ERNIE
  • 项目概览
    • 项目概览
    • 详情
    • 发布
  • 仓库
    • 仓库
    • 文件
    • 提交
    • 分支
    • 标签
    • 贡献者
    • 分支图
    • 比较
  • Issue 29
    • Issue 29
    • 列表
    • 看板
    • 标记
    • 里程碑
  • 合并请求 0
    • 合并请求 0
  • Pages
  • 分析
    • 分析
    • 仓库分析
    • DevOps
  • Wiki 0
    • Wiki
  • 成员
    • 成员
  • 收起侧边栏
  • 动态
  • 分支图
  • 创建新Issue
  • 提交
  • Issue看板
已关闭
开放中
Opened 4月 13, 2019 by saxon_zh@saxon_zhGuest

显卡内存不足导致的?但错误日志不明显,辛苦确认下。

Created by: onfireisme

同样的脚本,小样本语料都基本是ok的。 大样本就会跪。 batch size是 64

猜测是显存不足,但是错误日志看着很不明显,辛苦确认下。

I0413 02:31:41.502923 6739 TrainerInternal.cpp:165] Batch=48599 samples=3110336 AvgCost=0.726715 CurrentCost=6.82351 Eval: error=0.0763677 CurrentEval: error=0.46875

* Aborted at 1555093901 (unix time) try "date -d @1555093901" if you are using GNU date *

PC: @ 0x0 (unknown)

* SIGFPE (@0x8d4166) received by PID 6739 (TID 0x7f7805a54700) from PID 9257318; stack trace: *

@ 0x7f7842117a30 (unknown) @ 0x8d4166 paddle::GpuVectorT<>::getAbsMax() @ 0x8768c2 ZNSt17_Function_handlerIFvPN6paddle9ParameterEEZNS0_15TrainerInternal13trainOneBatchElRKNS0_9DataBatchEPSt6vectorINS0_8ArgumentESaIS9_EEEUlS2_E_E9_M_invokeERKSt9_Any_dataS2 @ 0x9db033 paddle::Parameter::incUpdate() @ 0x6d2259 paddle::FullMatrixProjection::backward() @ 0x69c18a paddle::MixedLayer::backward() @ 0x682b20 paddle::ParallelThread::computeThread() @ 0x7f7837f00530 execute_native_thread_routine @ 0x7f784210ff61 start_thread @ 0x7f7837690d0d clone @ 0x0 (unknown)
指派人
分配到
无
里程碑
无
分配里程碑
工时统计
无
截止日期
无
标识: paddlepaddle/ERNIE#94
渝ICP备2023009037号

京公网安备11010502055752号

网络110报警服务 Powered by GitLab CE v13.7
开源知识
Git 入门 Pro Git 电子书 在线学 Git
Markdown 基础入门 IT 技术知识开源图谱
帮助
使用手册 反馈建议 博客
《GitCode 隐私声明》 《GitCode 服务条款》 关于GitCode
Powered by GitLab CE v13.7