Skip to content
体验新版
项目
组织
正在加载...
登录
切换导航
打开侧边栏
MegEngine 天元
MegEngine
提交
5e912edd
MegEngine
项目概览
MegEngine 天元
/
MegEngine
接近 2 年 前同步成功
通知
414
Star
4708
Fork
583
代码
文件
提交
分支
Tags
贡献者
分支图
Diff
Issue
0
列表
看板
标记
里程碑
合并请求
0
DevOps
流水线
流水线任务
计划
Wiki
0
Wiki
分析
仓库
DevOps
项目成员
Pages
MegEngine
项目概览
项目概览
详情
发布
仓库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
Issue
0
Issue
0
列表
看板
标记
里程碑
合并请求
0
合并请求
0
Pages
DevOps
DevOps
流水线
流水线任务
计划
分析
分析
仓库分析
DevOps
Wiki
0
Wiki
成员
成员
收起侧边栏
关闭侧边栏
动态
分支图
创建新Issue
流水线任务
提交
Issue看板
提交
5e912edd
编写于
7月 18, 2020
作者:
M
Megvii Engine Team
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
fix(mgb/opr-mm): fix grad func of reduce and gather
GitOrigin-RevId: 4687faef9943460011737315cf052cc584e6988a
上级
e3e981cc
变更
1
隐藏空白更改
内联
并排
Showing
1 changed file
with
14 addition
and
1 deletion
+14
-1
src/opr-mm/impl/collective_comm.cpp
src/opr-mm/impl/collective_comm.cpp
+14
-1
未找到文件。
src/opr-mm/impl/collective_comm.cpp
浏览文件 @
5e912edd
...
@@ -139,7 +139,10 @@ public:
...
@@ -139,7 +139,10 @@ public:
VarNode
*
full_grad
(
VarNode
*
out_grad
,
const
CollectiveComm
*
opr
)
const
{
VarNode
*
full_grad
(
VarNode
*
out_grad
,
const
CollectiveComm
*
opr
)
const
{
auto
mode
=
ModeTrait
::
from_mode
(
opr
->
param
().
mode
).
grad_mode
();
auto
mode
=
ModeTrait
::
from_mode
(
opr
->
param
().
mode
).
grad_mode
();
SymbolVarArray
og_syms
;
SymbolVarArray
og_syms
;
og_syms
.
push_back
(
out_grad
);
if
(
out_grad
!=
nullptr
)
{
og_syms
.
push_back
(
out_grad
);
}
auto
&&
cn
=
opr
->
output
(
0
)
->
comp_node
();
auto
&&
cn
=
opr
->
output
(
0
)
->
comp_node
();
...
@@ -401,6 +404,11 @@ class CollectiveComm::ModeTrait::ReduceBase : public ReducedBasedTrait,
...
@@ -401,6 +404,11 @@ class CollectiveComm::ModeTrait::ReduceBase : public ReducedBasedTrait,
class
CollectiveComm
::
ModeTrait
::
REDUCE_SUM
final
:
public
ReduceBase
{
class
CollectiveComm
::
ModeTrait
::
REDUCE_SUM
final
:
public
ReduceBase
{
MegRay
::
ReduceOp
op
()
const
override
{
return
MegRay
::
ReduceOp
::
MEGRAY_SUM
;
}
MegRay
::
ReduceOp
op
()
const
override
{
return
MegRay
::
ReduceOp
::
MEGRAY_SUM
;
}
VarNode
*
grad
(
VarNode
*
out_grad
,
const
CollectiveComm
*
opr
)
const
override
{
VarNode
*
input
=
opr
->
is_root
()
?
out_grad
:
nullptr
;
return
full_grad
(
input
,
opr
);
}
Mode
grad_mode
()
override
{
return
Mode
::
BROADCAST
;
}
Mode
grad_mode
()
override
{
return
Mode
::
BROADCAST
;
}
};
};
...
@@ -484,6 +492,11 @@ class CollectiveComm::ModeTrait::GATHER : public ModeTrait {
...
@@ -484,6 +492,11 @@ class CollectiveComm::ModeTrait::GATHER : public ModeTrait {
mgb_assert
(
status
==
MegRay
::
MEGRAY_OK
,
"MegRay gather failed"
);
mgb_assert
(
status
==
MegRay
::
MEGRAY_OK
,
"MegRay gather failed"
);
}
}
VarNode
*
grad
(
VarNode
*
out_grad
,
const
CollectiveComm
*
opr
)
const
override
{
VarNode
*
input
=
opr
->
is_root
()
?
out_grad
:
nullptr
;
return
full_grad
(
input
,
opr
);
}
Mode
grad_mode
()
override
{
return
Mode
::
SCATTER
;
}
Mode
grad_mode
()
override
{
return
Mode
::
SCATTER
;
}
};
};
...
...
编辑
预览
Markdown
is supported
0%
请重试
或
添加新附件
.
添加附件
取消
You are about to add
0
people
to the discussion. Proceed with caution.
先完成此消息的编辑!
取消
想要评论请
注册
或
登录