Skip to content
体验新版
项目
组织
正在加载...
登录
切换导航
打开侧边栏
prince_zxill
ERNIE
提交
523546de
E
ERNIE
项目概览
prince_zxill
/
ERNIE
与 Fork 源项目一致
Fork自
PaddlePaddle / ERNIE
通知
1
Star
0
Fork
0
代码
文件
提交
分支
Tags
贡献者
分支图
Diff
Issue
0
列表
看板
标记
里程碑
合并请求
0
Wiki
0
Wiki
分析
仓库
DevOps
项目成员
Pages
E
ERNIE
项目概览
项目概览
详情
发布
仓库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
Issue
0
Issue
0
列表
看板
标记
里程碑
合并请求
0
合并请求
0
Pages
分析
分析
仓库分析
DevOps
Wiki
0
Wiki
成员
成员
收起侧边栏
关闭侧边栏
动态
分支图
创建新Issue
提交
Issue看板
体验新版 GitCode,发现更多精彩内容 >>
提交
523546de
编写于
9月 29, 2019
作者:
C
chenxuyi
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
auto mkdir in multicard finetune
上级
2d278cdc
变更
2
隐藏空白更改
内联
并排
Showing
2 changed file
with
18 addition
and
5 deletion
+18
-5
finetune_launch.py
finetune_launch.py
+9
-3
pretrain_launch.py
pretrain_launch.py
+9
-2
未找到文件。
finetune_launch.py
浏览文件 @
523546de
...
...
@@ -137,14 +137,20 @@ def start_procs(args):
cmd
=
[
sys
.
executable
,
"-u"
,
args
.
training_script
]
+
args
.
training_script_args
cmds
.
append
(
cmd
)
if
args
.
split_log_path
:
fn
=
open
(
"%s/%sjob.log.%d"
%
(
args
.
split_log_path
,
args
.
log_prefix
,
trainer_id
),
"a"
)
logdir
=
"%s/%sjob.log.%d"
%
(
args
.
split_log_path
,
args
.
log_prefix
,
trainer_id
)
try
:
os
.
mkdir
(
os
.
path
.
dirname
(
logdir
))
except
OSError
:
pass
fn
=
open
(
logdir
,
"a"
)
log_fns
.
append
(
fn
)
process
=
subprocess
.
Popen
(
cmd
,
env
=
current_env
,
stdout
=
fn
,
stderr
=
fn
)
log
.
info
(
'subprocess launched, check log at %s'
%
logdir
)
else
:
process
=
subprocess
.
Popen
(
cmd
,
env
=
current_env
)
log
.
info
(
'subprocess launched'
)
log
.
info
(
'subprocess launched'
)
procs
.
append
(
process
)
try
:
...
...
pretrain_launch.py
浏览文件 @
523546de
...
...
@@ -139,12 +139,19 @@ def start_procs(args):
cmds
.
append
(
cmd
)
if
args
.
split_log_path
:
fn
=
open
(
"%s/%sjob.log.%d"
%
(
args
.
split_log_path
,
args
.
log_prefix
,
trainer_id
),
"a"
)
logdir
=
"%s/%sjob.log.%d"
%
(
args
.
split_log_path
,
args
.
log_prefix
,
trainer_id
)
try
:
os
.
mkdir
(
os
.
path
.
dirname
(
logdir
))
except
OSError
:
pass
fn
=
open
(
logdir
,
"a"
)
log_fns
.
append
(
fn
)
process
=
subprocess
.
Popen
(
cmd
,
env
=
current_env
,
stdout
=
fn
,
stderr
=
fn
)
log
.
info
(
'subprocess launched, check log at %s'
%
logdir
)
else
:
process
=
subprocess
.
Popen
(
cmd
,
env
=
current_env
)
log
.
info
(
'subprocess launched'
)
log
.
info
(
'subprocess launched'
)
procs
.
append
(
process
)
try
:
...
...
编辑
预览
Markdown
is supported
0%
请重试
或
添加新附件
.
添加附件
取消
You are about to add
0
people
to the discussion. Proceed with caution.
先完成此消息的编辑!
取消
想要评论请
注册
或
登录