Skip to content
体验新版
项目
组织
正在加载...
登录
切换导航
打开侧边栏
Oneflow-Inc
oneflow
提交
2436d1a1
O
oneflow
项目概览
Oneflow-Inc
/
oneflow
上一次同步 2 年多
通知
13
Star
2733
Fork
0
代码
文件
提交
分支
Tags
贡献者
分支图
Diff
Issue
0
列表
看板
标记
里程碑
合并请求
0
DevOps
流水线
流水线任务
计划
Wiki
0
Wiki
分析
仓库
DevOps
项目成员
Pages
O
oneflow
项目概览
项目概览
详情
发布
仓库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
Issue
0
Issue
0
列表
看板
标记
里程碑
合并请求
0
合并请求
0
Pages
DevOps
DevOps
流水线
流水线任务
计划
分析
分析
仓库分析
DevOps
Wiki
0
Wiki
成员
成员
收起侧边栏
关闭侧边栏
动态
分支图
创建新Issue
流水线任务
提交
Issue看板
体验新版 GitCode,发现更多精彩内容 >>
提交
2436d1a1
编写于
8月 31, 2018
作者:
J
Juncheng
提交者:
Jinhui Yuan
8月 31, 2018
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
fix order of shared model nodes (#1180)
Former-commit-id:
28a6fc98
上级
6a139c48
变更
1
隐藏空白更改
内联
并排
Showing
1 changed file
with
13 addition
and
18 deletion
+13
-18
oneflow/core/graph/logical_graph.cpp
oneflow/core/graph/logical_graph.cpp
+13
-18
未找到文件。
oneflow/core/graph/logical_graph.cpp
浏览文件 @
2436d1a1
...
...
@@ -117,38 +117,33 @@ void LogicalGraph::NaiveBuildFwStruct(
void
LogicalGraph
::
FixSharedModelNodes
(
const
HashMap
<
std
::
string
,
std
::
vector
<
LogicalNode
*>>&
op_name2nodes
)
{
HashSet
<
std
::
string
>
all_shared_model_op_names
;
const
DLNetConf
&
dlnet_conf
=
Global
<
JobDesc
>::
Get
()
->
dlnet_conf
();
for
(
const
OpNameSet
&
op_name_set
:
dlnet_conf
.
shared_model_group
())
{
std
::
vector
<
std
::
string
>
shared_model_op_names
(
op_name_set
.
op_name
().
begin
(),
op_name_set
.
op_name
().
end
());
SortAndRemoveDuplication
(
&
shared_model_op_names
);
CHECK_GE
(
shared_model_op_names
.
size
(),
2
);
auto
shared_model_nodes
=
std
::
make_shared
<
std
::
vector
<
LogicalNode
*>>
();
for
(
const
std
::
string
&
op_name
:
op_name_set
.
op_name
())
{
shared_model_nodes
->
reserve
(
shared_model_op_names
.
size
());
for
(
const
std
::
string
&
op_name
:
shared_model_op_names
)
{
CHECK
(
all_shared_model_op_names
.
insert
(
op_name
).
second
);
CHECK_EQ
(
op_name2nodes
.
at
(
op_name
).
size
(),
1
);
shared_model_nodes
->
push_back
(
op_name2nodes
.
at
(
op_name
).
front
());
}
SortAndRemoveDuplication
(
shared_model_nodes
.
get
());
for
(
LogicalNode
*
cur_node
:
*
shared_model_nodes
)
{
cur_node
->
mut_shared_model_nodes
()
=
shared_model_nodes
;
}
const
std
::
string
&
shared_op_name
=
shared_model_nodes
->
front
()
->
SoleOp
()
->
op_name
();
const
ParallelDesc
*
shared_parallel_desc
=
shared_model_nodes
->
front
()
->
parallel_desc
().
get
();
FOR_RANGE
(
size_t
,
i
,
1
,
shared_model_nodes
->
size
())
{
shared_model_nodes
->
at
(
i
)
->
SoleOp
()
->
FixLbiWhenShareModel
(
shared_op_name
);
CHECK
(
shared_model_nodes
->
at
(
i
)
->
parallel_desc
()
->
Equal
(
shared_parallel_desc
));
}
}
ForEachNode
([
&
](
LogicalNode
*
cur_node
)
{
if
(
cur_node
->
shared_model_nodes
())
{
for
(
LogicalNode
*
shared_node
:
*
(
cur_node
->
shared_model_nodes
()))
{
if
(
shared_node
->
parallel_desc
()
==
nullptr
)
{
continue
;
}
if
(
cur_node
->
parallel_desc
())
{
CHECK
(
cur_node
->
parallel_desc
()
->
Equal
(
shared_node
->
parallel_desc
().
get
()));
}
else
{
cur_node
->
mut_parallel_desc
()
=
shared_node
->
parallel_desc
();
}
}
}
else
{
// do nothing
}
CHECK
(
cur_node
->
parallel_desc
())
<<
"Please set the placement of "
<<
cur_node
->
SoleOp
()
->
op_name
();
});
}
void
LogicalGraph
::
SetMainModelParallel
()
{
...
...
编辑
预览
Markdown
is supported
0%
请重试
或
添加新附件
.
添加附件
取消
You are about to add
0
people
to the discussion. Proceed with caution.
先完成此消息的编辑!
取消
想要评论请
注册
或
登录