Skip to content
体验新版
项目
组织
正在加载...
登录
切换导航
打开侧边栏
Crayon鑫
Paddle
提交
af64f39b
P
Paddle
项目概览
Crayon鑫
/
Paddle
与 Fork 源项目一致
Fork自
PaddlePaddle / Paddle
通知
1
Star
1
Fork
0
代码
文件
提交
分支
Tags
贡献者
分支图
Diff
Issue
1
列表
看板
标记
里程碑
合并请求
0
Wiki
0
Wiki
分析
仓库
DevOps
项目成员
Pages
P
Paddle
项目概览
项目概览
详情
发布
仓库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
Issue
1
Issue
1
列表
看板
标记
里程碑
合并请求
0
合并请求
0
Pages
分析
分析
仓库分析
DevOps
Wiki
0
Wiki
成员
成员
收起侧边栏
关闭侧边栏
动态
分支图
创建新Issue
提交
Issue看板
提交
af64f39b
编写于
3月 07, 2018
作者:
F
fengjiayi
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
fix compile errors
上级
3fcd16ed
变更
2
隐藏空白更改
内联
并排
Showing
2 changed file
with
8 addition
and
6 deletion
+8
-6
paddle/fluid/framework/reader.cc
paddle/fluid/framework/reader.cc
+7
-5
paddle/fluid/framework/reader.h
paddle/fluid/framework/reader.h
+1
-1
未找到文件。
paddle/fluid/framework/reader.cc
浏览文件 @
af64f39b
...
@@ -120,11 +120,13 @@ void DoubleBufferReader::ReadNext(std::vector<LoDTensor>* out) {
...
@@ -120,11 +120,13 @@ void DoubleBufferReader::ReadNext(std::vector<LoDTensor>* out) {
}
}
out
->
clear
();
out
->
clear
();
out
->
res
iz
e
(
buffer_
[
read_pos_
].
size
());
out
->
res
erv
e
(
buffer_
[
read_pos_
].
size
());
// TODO(fengjiayi): This copy shall be reduced.
// TODO(fengjiayi): This copy shall be reduced.
for
(
size_t
i
=
0
;
i
<
buffer_
[
read_pos_
].
size
();
++
i
)
{
for
(
size_t
i
=
0
;
i
<
buffer_
[
read_pos_
].
size
();
++
i
)
{
TensorCopy
(
buffer_
[
read_pos_
][
i
],
platform
::
CPUPlace
(),
&
out
[
i
]);
LoDTensor
dst
;
out
[
i
].
set_lod
(
buffer_
[
read_pos_
][
i
].
lod
());
TensorCopy
(
buffer_
[
read_pos_
][
i
],
platform
::
CPUPlace
(),
&
dst
);
dst
.
set_lod
(
buffer_
[
read_pos_
][
i
].
lod
());
out
->
push_back
(
dst
);
}
}
++
read_pos_
;
++
read_pos_
;
...
@@ -134,13 +136,13 @@ void DoubleBufferReader::ReadNext(std::vector<LoDTensor>* out) {
...
@@ -134,13 +136,13 @@ void DoubleBufferReader::ReadNext(std::vector<LoDTensor>* out) {
buffer_not_full_
.
notify_all
();
buffer_not_full_
.
notify_all
();
}
}
bool
DoubleBufferReader
::
HasNext
()
{
bool
DoubleBufferReader
::
HasNext
()
const
{
return
reader_
->
HasNext
()
||
!
buffer_
.
empty
();
return
reader_
->
HasNext
()
||
!
buffer_
.
empty
();
}
}
void
DoubleBufferReader
::
ProducerThreadFunc
()
{
void
DoubleBufferReader
::
ProducerThreadFunc
()
{
while
(
reader_
->
HasNext
())
{
while
(
reader_
->
HasNext
())
{
std
::
unique_lock
<
std
::
mutex
>
lck
(
mtx
);
std
::
unique_lock
<
std
::
mutex
>
lck
(
mtx
_
);
while
(((
write_pos_
+
1
)
%
kDoubleBufferSize
)
==
read_pos_
)
{
while
(((
write_pos_
+
1
)
%
kDoubleBufferSize
)
==
read_pos_
)
{
buffer_not_full_
.
wait
(
lck
);
buffer_not_full_
.
wait
(
lck
);
}
}
...
...
paddle/fluid/framework/reader.h
浏览文件 @
af64f39b
...
@@ -140,7 +140,7 @@ class BatchReader : public DecoratedReader {
...
@@ -140,7 +140,7 @@ class BatchReader : public DecoratedReader {
class
DoubleBufferReader
:
public
DecoratedReader
{
class
DoubleBufferReader
:
public
DecoratedReader
{
public:
public:
DoubleBufferReader
(
ReaderBase
*
reader
)
explicit
DoubleBufferReader
(
ReaderBase
*
reader
)
:
DecoratedReader
(
reader
),
buffer_
(
kDoubleBufferSize
)
{
:
DecoratedReader
(
reader
),
buffer_
(
kDoubleBufferSize
)
{
framework
::
Async
(
std
::
bind
(
&
DoubleBufferReader
::
ProducerThreadFunc
,
this
));
framework
::
Async
(
std
::
bind
(
&
DoubleBufferReader
::
ProducerThreadFunc
,
this
));
}
}
...
...
编辑
预览
Markdown
is supported
0%
请重试
或
添加新附件
.
添加附件
取消
You are about to add
0
people
to the discussion. Proceed with caution.
先完成此消息的编辑!
取消
想要评论请
注册
或
登录