Skip to content
体验新版
项目
组织
正在加载...
登录
切换导航
打开侧边栏
PaddlePaddle
PaddleClas
提交
cf40ed6f
P
PaddleClas
项目概览
PaddlePaddle
/
PaddleClas
大约 1 年 前同步成功
通知
115
Star
4999
Fork
1114
代码
文件
提交
分支
Tags
贡献者
分支图
Diff
Issue
19
列表
看板
标记
里程碑
合并请求
6
Wiki
0
Wiki
分析
仓库
DevOps
项目成员
Pages
P
PaddleClas
项目概览
项目概览
详情
发布
仓库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
Issue
19
Issue
19
列表
看板
标记
里程碑
合并请求
6
合并请求
6
Pages
分析
分析
仓库分析
DevOps
Wiki
0
Wiki
成员
成员
收起侧边栏
关闭侧边栏
动态
分支图
创建新Issue
提交
Issue看板
提交
cf40ed6f
编写于
5月 29, 2020
作者:
S
shippingwang
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
fixed
上级
62772c11
变更
3
隐藏空白更改
内联
并排
Showing
3 changed file
with
9 addition
and
8 deletion
+9
-8
ppcls/utils/logger.py
ppcls/utils/logger.py
+2
-4
tools/program.py
tools/program.py
+3
-3
tools/train.py
tools/train.py
+4
-1
未找到文件。
ppcls/utils/logger.py
浏览文件 @
cf40ed6f
...
...
@@ -81,10 +81,8 @@ def error(fmt, *args):
_logger
.
error
(
coloring
(
fmt
,
"FAIL"
),
*
args
)
def
scaler
(
name
,
value
,
step
,
path
):
from
visualdl
import
LogWriter
vdl_writer
=
LogWriter
(
path
)
vdl_writer
.
add_scalar
(
name
,
value
,
step
)
def
scaler
(
name
,
value
,
step
,
writer
):
writer
.
add_scalar
(
name
,
value
,
step
)
def
advertise
():
...
...
tools/program.py
浏览文件 @
cf40ed6f
...
...
@@ -387,7 +387,7 @@ def compile(config, program, loss_name=None):
total_step
=
0
def
run
(
dataloader
,
exe
,
program
,
fetchs
,
epoch
=
0
,
mode
=
'train'
,
vdl_
di
r
=
None
):
def
run
(
dataloader
,
exe
,
program
,
fetchs
,
epoch
=
0
,
mode
=
'train'
,
vdl_
write
r
=
None
):
"""
Feed data to the model and fetch the measures and loss
...
...
@@ -415,9 +415,9 @@ def run(dataloader, exe, program, fetchs, epoch=0, mode='train', vdl_dir=None):
metric_list
[
i
].
update
(
m
[
0
],
len
(
batch
[
0
]))
fetchs_str
=
''
.
join
([
str
(
m
.
value
)
+
' '
for
m
in
metric_list
]
+
[
batch_time
.
value
])
+
's'
if
vdl_
di
r
:
if
vdl_
write
r
:
global
total_step
logger
.
scaler
(
'loss'
,
metrics
[
0
][
0
],
total_step
,
vdl_
di
r
)
logger
.
scaler
(
'loss'
,
metrics
[
0
][
0
],
total_step
,
vdl_
write
r
)
total_step
+=
1
if
mode
==
'eval'
:
logger
.
info
(
"{:s} step:{:<4d} {:s}s"
.
format
(
mode
,
idx
,
fetchs_str
))
...
...
tools/train.py
浏览文件 @
cf40ed6f
...
...
@@ -19,6 +19,7 @@ from __future__ import print_function
import
argparse
import
os
from
visualdl
import
LogWriter
import
paddle.fluid
as
fluid
from
paddle.fluid.incubate.fleet.base
import
role_maker
from
paddle.fluid.incubate.fleet.collective
import
fleet
...
...
@@ -96,10 +97,12 @@ def main(args):
compiled_valid_prog
=
program
.
compile
(
config
,
valid_prog
)
compiled_train_prog
=
fleet
.
main_program
vdl_writer
=
LogWriter
(
args
.
vdl_dir
)
if
args
.
vdl_dir
else
None
for
epoch_id
in
range
(
config
.
epochs
):
# 1. train with train dataset
program
.
run
(
train_dataloader
,
exe
,
compiled_train_prog
,
train_fetchs
,
epoch_id
,
'train'
,
args
.
vdl_di
r
)
epoch_id
,
'train'
,
vdl_write
r
)
if
int
(
os
.
getenv
(
"PADDLE_TRAINER_ID"
,
0
))
==
0
:
# 2. validate with validate dataset
if
config
.
validate
and
epoch_id
%
config
.
valid_interval
==
0
:
...
...
编辑
预览
Markdown
is supported
0%
请重试
或
添加新附件
.
添加附件
取消
You are about to add
0
people
to the discussion. Proceed with caution.
先完成此消息的编辑!
取消
想要评论请
注册
或
登录