Skip to content
体验新版
项目
组织
正在加载...
登录
切换导航
打开侧边栏
PaddlePaddle
PaddleClas
提交
e165897c
P
PaddleClas
项目概览
PaddlePaddle
/
PaddleClas
接近 2 年 前同步成功
通知
116
Star
4999
Fork
1114
代码
文件
提交
分支
Tags
贡献者
分支图
Diff
Issue
19
列表
看板
标记
里程碑
合并请求
6
Wiki
0
Wiki
分析
仓库
DevOps
项目成员
Pages
P
PaddleClas
项目概览
项目概览
详情
发布
仓库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
Issue
19
Issue
19
列表
看板
标记
里程碑
合并请求
6
合并请求
6
Pages
分析
分析
仓库分析
DevOps
Wiki
0
Wiki
成员
成员
收起侧边栏
关闭侧边栏
动态
分支图
创建新Issue
提交
Issue看板
未验证
提交
e165897c
编写于
5月 06, 2021
作者:
L
littletomatodonkey
提交者:
GitHub
5月 06, 2021
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
fix drop last for training process (#713)
上级
9c0f0496
变更
3
隐藏空白更改
内联
并排
Showing
3 changed file
with
19 addition
and
4 deletion
+19
-4
ppcls/data/reader.py
ppcls/data/reader.py
+6
-4
tools/eval.py
tools/eval.py
+4
-0
tools/train.py
tools/train.py
+9
-0
未找到文件。
ppcls/data/reader.py
浏览文件 @
e165897c
...
...
@@ -197,7 +197,7 @@ class CommonDataset(Dataset):
def
__len__
(
self
):
return
self
.
num_samples
class
MultiLabelDataset
(
Dataset
):
"""
...
...
@@ -224,9 +224,11 @@ class MultiLabelDataset(Dataset):
labels
=
label_str
.
split
(
','
)
labels
=
[
int
(
i
)
for
i
in
labels
]
return
(
transform
(
img
,
self
.
ops
),
np
.
array
(
labels
).
astype
(
"float32"
))
return
(
transform
(
img
,
self
.
ops
),
np
.
array
(
labels
).
astype
(
"float32"
))
except
Exception
as
e
:
logger
.
error
(
"data read failed: {}, exception info: {}"
.
format
(
line
,
e
))
logger
.
error
(
"data read failed: {}, exception info: {}"
.
format
(
line
,
e
))
return
self
.
__getitem__
(
random
.
randint
(
0
,
len
(
self
)))
def
__len__
(
self
):
...
...
@@ -291,7 +293,7 @@ class Reader:
dataset
,
batch_size
=
batch_size
,
shuffle
=
self
.
shuffle
and
is_train
,
drop_last
=
is_train
)
drop_last
=
False
)
loader
=
DataLoader
(
dataset
,
batch_sampler
=
batch_sampler
,
...
...
tools/eval.py
浏览文件 @
e165897c
...
...
@@ -72,6 +72,10 @@ def main(args, return_dict={}):
init_model
(
config
,
net
,
optimizer
=
None
)
valid_dataloader
=
Reader
(
config
,
'valid'
,
places
=
place
)()
if
len
(
valid_dataloader
)
<=
0
:
logger
.
error
(
"valid dataloader is empty, please check your data config again!"
)
sys
.
exit
(
-
1
)
net
.
eval
()
with
paddle
.
no_grad
():
if
not
multilabel
:
...
...
tools/train.py
浏览文件 @
e165897c
...
...
@@ -88,9 +88,18 @@ def main(args):
init_model
(
config
,
net
,
optimizer
)
train_dataloader
=
Reader
(
config
,
'train'
,
places
=
place
)()
if
len
(
train_dataloader
)
<=
0
:
logger
.
error
(
"train dataloader is empty, please check your data config again!"
)
sys
.
exit
(
-
1
)
if
config
.
validate
:
valid_dataloader
=
Reader
(
config
,
'valid'
,
places
=
place
)()
if
len
(
valid_dataloader
)
<=
0
:
logger
.
error
(
"valid dataloader is empty, please check your data config again!"
)
sys
.
exit
(
-
1
)
last_epoch_id
=
config
.
get
(
"last_epoch"
,
-
1
)
best_top1_acc
=
0.0
# best top1 acc record
...
...
编辑
预览
Markdown
is supported
0%
请重试
或
添加新附件
.
添加附件
取消
You are about to add
0
people
to the discussion. Proceed with caution.
先完成此消息的编辑!
取消
想要评论请
注册
或
登录