Skip to content
体验新版
项目
组织
正在加载...
登录
切换导航
打开侧边栏
BaiXuePrincess
Paddle
提交
a0d14b18
P
Paddle
项目概览
BaiXuePrincess
/
Paddle
与 Fork 源项目一致
Fork自
PaddlePaddle / Paddle
通知
1
Star
1
Fork
0
代码
文件
提交
分支
Tags
贡献者
分支图
Diff
Issue
0
列表
看板
标记
里程碑
合并请求
0
Wiki
0
Wiki
分析
仓库
DevOps
项目成员
Pages
P
Paddle
项目概览
项目概览
详情
发布
仓库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
Issue
0
Issue
0
列表
看板
标记
里程碑
合并请求
0
合并请求
0
Pages
分析
分析
仓库分析
DevOps
Wiki
0
Wiki
成员
成员
收起侧边栏
关闭侧边栏
动态
分支图
创建新Issue
提交
Issue看板
提交
a0d14b18
编写于
2月 24, 2020
作者:
S
sneaxiy
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
Turn on keep_order=True for test, test=develop
上级
a4951843
变更
2
显示空白变更内容
内联
并排
Showing
2 changed file
with
5 addition
and
6 deletion
+5
-6
paddle/fluid/operators/reader/lod_tensor_blocking_queue.h
paddle/fluid/operators/reader/lod_tensor_blocking_queue.h
+3
-4
python/paddle/fluid/reader.py
python/paddle/fluid/reader.py
+2
-2
未找到文件。
paddle/fluid/operators/reader/lod_tensor_blocking_queue.h
浏览文件 @
a0d14b18
...
...
@@ -135,7 +135,6 @@ class OrderedMultiDeviceLoDTensorBlockingQueue {
for
(
auto
&
item
:
queues_
)
{
item
->
Close
();
}
data_index_
=
0
;
}
inline
void
Kill
()
{
...
...
@@ -157,6 +156,7 @@ class OrderedMultiDeviceLoDTensorBlockingQueue {
auto
cap
=
(
capacity_
+
dev_cnt
-
1
)
/
dev_cnt
;
item
.
reset
(
new
LoDTensorBlockingQueue
(
cap
,
speed_test_mode_
));
}
data_index_
=
0
;
}
inline
void
SetResetMethod
(
size_t
idx
,
...
...
@@ -171,8 +171,7 @@ class OrderedMultiDeviceLoDTensorBlockingQueue {
private:
const
std
::
shared_ptr
<
LoDTensorBlockingQueue
>&
CurQueue
()
{
EnforceIsInited
();
return
queues_
[
data_index_
.
fetch_add
(
1
)
%
queues_
.
size
()];
return
queues_
[(
data_index_
++
)
%
queues_
.
size
()];
}
private:
...
...
@@ -183,7 +182,7 @@ class OrderedMultiDeviceLoDTensorBlockingQueue {
private:
std
::
vector
<
std
::
shared_ptr
<
LoDTensorBlockingQueue
>>
queues_
;
mutable
std
::
atomic
<
uint64_t
>
data_index_
{
0
};
mutable
uint64_t
data_index_
{
0
};
size_t
dev_cnt_
{
0
};
const
size_t
capacity_
;
...
...
python/paddle/fluid/reader.py
浏览文件 @
a0d14b18
...
...
@@ -89,7 +89,7 @@ class DataLoader(object):
return_list
=
False
,
use_multiprocess
=
False
,
drop_last
=
True
,
keep_order
=
Fals
e
):
keep_order
=
Tru
e
):
"""
Create a DataLoader object for loading data from Python generator.
Data would be prefetched using Python thread and be pushed
...
...
@@ -633,7 +633,7 @@ class GeneratorLoader(DataLoaderBase):
iterable
=
True
,
return_list
=
False
,
drop_last
=
True
,
keep_order
=
Fals
e
):
keep_order
=
Tru
e
):
self
.
_tensor_reader
=
None
self
.
_places
=
None
self
.
_thread
=
None
...
...
编辑
预览
Markdown
is supported
0%
请重试
或
添加新附件
.
添加附件
取消
You are about to add
0
people
to the discussion. Proceed with caution.
先完成此消息的编辑!
取消
想要评论请
注册
或
登录