Skip to content
体验新版
项目
组织
正在加载...
登录
切换导航
打开侧边栏
wzpei9
Paddle
提交
ea11a0a8
P
Paddle
项目概览
wzpei9
/
Paddle
与 Fork 源项目一致
Fork自
PaddlePaddle / Paddle
通知
1
Star
1
Fork
0
代码
文件
提交
分支
Tags
贡献者
分支图
Diff
Issue
1
列表
看板
标记
里程碑
合并请求
0
Wiki
0
Wiki
分析
仓库
DevOps
项目成员
Pages
P
Paddle
项目概览
项目概览
详情
发布
仓库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
Issue
1
Issue
1
列表
看板
标记
里程碑
合并请求
0
合并请求
0
Pages
分析
分析
仓库分析
DevOps
Wiki
0
Wiki
成员
成员
收起侧边栏
关闭侧边栏
动态
分支图
创建新Issue
提交
Issue看板
体验新版 GitCode,发现更多精彩内容 >>
提交
ea11a0a8
编写于
3月 19, 2018
作者:
Y
Yu Yang
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
Use volitie
上级
515e516e
变更
2
隐藏空白更改
内联
并排
Showing
2 changed file
with
15 addition
and
14 deletion
+15
-14
paddle/fluid/framework/parallel_executor.cc
paddle/fluid/framework/parallel_executor.cc
+13
-11
paddle/fluid/framework/parallel_executor.h
paddle/fluid/framework/parallel_executor.h
+2
-3
未找到文件。
paddle/fluid/framework/parallel_executor.cc
浏览文件 @
ea11a0a8
...
...
@@ -97,6 +97,10 @@ struct ComputationOpHandle : public OpHandle {
void
Run
()
override
{
// Wait other op if necessary
if
(
platform
::
is_gpu_place
(
place_
))
{
int
dev_id
=
boost
::
get
<
platform
::
CUDAPlace
>
(
place_
).
device
;
cudaSetDevice
(
dev_id
);
}
auto
*
cur_ctx
=
dev_ctx_
[
place_
];
for
(
auto
*
in
:
inputs_
)
{
if
(
in
->
generated_op_
&&
in
->
generated_op_
->
dev_ctx_
[
place_
]
!=
cur_ctx
)
{
...
...
@@ -637,22 +641,20 @@ void ParallelExecutor::Run(const std::vector<std::string> &fetch_tensors,
auto
fetched_data
=
std
::
make_shared
<
FetchedData
>
(
fetch_tensors
.
size
());
// Version --> VarHandle
member_
->
exception_
.
reset
();
std
::
unordered_map
<
VarHandleBase
*
,
std
::
atomic
<
bool
>
>
pending_vars
;
std
::
unordered_map
<
VarHandleBase
*
,
volatile
bool
>
pending_vars
;
std
::
unordered_map
<
OpHandle
*
,
size_t
>
pending_ops
;
for
(
auto
&
place_pair
:
member_
->
vars_
)
{
for
(
auto
&
name_pair
:
place_pair
.
second
)
{
for
(
auto
&
version_pair
:
name_pair
.
second
)
{
pending_vars
[
&
version_pair
.
second
].
store
(
version_pair
.
second
.
generated_op_
==
nullptr
,
std
::
memory_order_relaxed
);
pending_vars
[
&
version_pair
.
second
]
=
version_pair
.
second
.
generated_op_
==
nullptr
;
}
}
}
for
(
auto
&
var
:
member_
->
dep_vars_
)
{
pending_vars
[
var
.
get
()].
store
(
var
->
generated_op_
==
nullptr
,
std
::
memory_order_relaxed
);
pending_vars
[
var
.
get
()]
=
var
->
generated_op_
==
nullptr
;
}
std
::
vector
<
OpHandle
*>
to_run
;
...
...
@@ -704,7 +706,7 @@ void ParallelExecutor::Run(const std::vector<std::string> &fetch_tensors,
while
(
!
pending_ops
.
empty
())
{
VarHandleBase
*
ready_var
=
nullptr
;
for
(
auto
&
pair
:
pending_vars
)
{
if
(
pair
.
second
.
load
(
std
::
memory_order_acquire
)
)
{
if
(
pair
.
second
)
{
ready_var
=
pair
.
first
;
}
}
...
...
@@ -737,10 +739,10 @@ void ParallelExecutor::Run(const std::vector<std::string> &fetch_tensors,
}
void
ParallelExecutor
::
RunOp
(
std
::
unordered_map
<
VarHandleBase
*
,
std
::
atomic
<
bool
>
>
&
pending_vars
,
std
::
unordered_map
<
VarHandleBase
*
,
volatile
bool
>
&
pending_vars
,
OpHandle
*
op
)
const
{
std
::
vector
<
std
::
atomic
<
bool
>
*>
*
ready_buffer
=
new
std
::
vector
<
std
::
atomic
<
bool
>
*>
();
std
::
vector
<
volatile
bool
*>
*
ready_buffer
=
new
std
::
vector
<
volatile
bool
*>
();
for
(
auto
*
var
:
op
->
outputs_
)
{
ready_buffer
->
emplace_back
(
&
pending_vars
[
var
]);
}
...
...
@@ -751,7 +753,7 @@ void ParallelExecutor::RunOp(
op
->
Run
();
VLOG
(
10
)
<<
"Done "
<<
this
;
for
(
auto
*
ready
:
*
ready_buffer
)
{
ready
->
store
(
true
,
std
::
memory_order_release
)
;
*
ready
=
true
;
}
delete
ready_buffer
;
}
catch
(
platform
::
EnforceNotMet
ex
)
{
...
...
paddle/fluid/framework/parallel_executor.h
浏览文件 @
ea11a0a8
...
...
@@ -60,9 +60,8 @@ class ParallelExecutor {
void
BuildNCCLCommunicator
()
const
;
void
RunOp
(
std
::
unordered_map
<
VarHandleBase
*
,
std
::
atomic
<
bool
>>&
pending_vars
,
OpHandle
*
op
)
const
;
void
RunOp
(
std
::
unordered_map
<
VarHandleBase
*
,
volatile
bool
>&
pending_vars
,
OpHandle
*
op
)
const
;
void
PolishGraphToSupportDataHarzaeds
()
const
;
};
...
...
编辑
预览
Markdown
is supported
0%
请重试
或
添加新附件
.
添加附件
取消
You are about to add
0
people
to the discussion. Proceed with caution.
先完成此消息的编辑!
取消
想要评论请
注册
或
登录