Skip to content
体验新版
项目
组织
正在加载...
登录
切换导航
打开侧边栏
afeixing77
Paddle
提交
ff7fdb7d
P
Paddle
项目概览
afeixing77
/
Paddle
与 Fork 源项目一致
Fork自
PaddlePaddle / Paddle
通知
1
Star
0
Fork
0
代码
文件
提交
分支
Tags
贡献者
分支图
Diff
Issue
0
列表
看板
标记
里程碑
合并请求
0
Wiki
0
Wiki
分析
仓库
DevOps
项目成员
Pages
P
Paddle
项目概览
项目概览
详情
发布
仓库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
Issue
0
Issue
0
列表
看板
标记
里程碑
合并请求
0
合并请求
0
Pages
分析
分析
仓库分析
DevOps
Wiki
0
Wiki
成员
成员
收起侧边栏
关闭侧边栏
动态
分支图
创建新Issue
提交
Issue看板
体验新版 GitCode,发现更多精彩内容 >>
提交
ff7fdb7d
编写于
10月 03, 2017
作者:
F
fengjiayi
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
Add `CreateBackwardOp` function
上级
a80e0100
变更
6
隐藏空白更改
内联
并排
Showing
6 changed file
with
95 addition
and
0 deletion
+95
-0
paddle/framework/backward.cc
paddle/framework/backward.cc
+56
-0
paddle/framework/backward.h
paddle/framework/backward.h
+5
-0
paddle/framework/op_desc.cc
paddle/framework/op_desc.cc
+20
-0
paddle/framework/op_desc.h
paddle/framework/op_desc.h
+7
-0
paddle/framework/op_registry.cc
paddle/framework/op_registry.cc
+5
-0
paddle/framework/op_registry.h
paddle/framework/op_registry.h
+2
-0
未找到文件。
paddle/framework/backward.cc
浏览文件 @
ff7fdb7d
...
...
@@ -222,5 +222,61 @@ std::unique_ptr<OperatorBase> Backward(
return
BackwardRecursive
(
forwardOp
,
no_grad_names
,
uid
);
}
// ==================================== //
static
bool
AllGradInSet
(
const
std
::
vector
<
std
::
string
>&
names
,
const
std
::
unordered_set
<
std
::
string
>&
set
)
{
for
(
const
std
::
string
&
name
:
names
)
{
if
(
!
set
.
count
(
GradVarName
(
name
)))
{
return
false
;
}
}
return
true
;
}
std
::
vector
<
OpDescBind
>
CreatBackwardOps
(
const
OpDescBind
&
op_desc
,
unordered_map
<
std
::
string
>&
no_grad_vars
)
{
std
::
vector
<
OpDescBind
>
grad_op_descs
;
// All input gradients of forwarding operator do not need to calculat.
if
(
AllGradInSet
(
op_desc_
.
InputNames
(),
kGradVarSuffix
,
no_grad_vars
))
{
return
grad_op_descs
;
// empty vector
}
// All output gradients of forwarding operator do not need to calculate.
const
std
::
vector
<
std
::
string
>&
outputs
=
op_desc_
.
OutputNames
();
if
(
AllGradInSet
(
outputs
,
kGradVarSuffix
,
no_grad_vars
))
{
for
(
const
std
::
string
&
name
:
outputs
)
{
no_grad_vars
.
insert
(
GradVarName
(
name
));
}
return
grad_op_descs
;
// empty vector
}
grad_op_descs
=
OpRegistry
::
CreateGradOpDescs
(
op_desc
);
std
::
vector
<
OpDescBind
>
fill_zeros_ops
;
for
(
OpDescBind
&
desc
:
grad_op_descs
)
{
for
(
const
std
::
string
&
in_name
:
desc
.
InputNames
())
{
if
(
no_grad_vars
.
count
(
in_name
))
{
std
::
string
prefix
=
in_name
.
substr
(
0
,
in_name
.
size
()
-
sizeof
(
kGradVarSuffix
)
/
sizeof
(
char
)
+
1
);
std
::
string
new_name
=
prefix
+
kZeroVarSuffix
;
desc
.
Rename
(
in_name
,
new_name
);
OpDescBind
op_desc_bind
(
{
"fill_zeros_like"
,
{{
"X"
,
{
prefix
}}},
{{
"Y"
,
{
new_name
}}},
{}});
fill_zeros_ops
.
push_back
(
op_desc_bind
);
}
}
for
(
const
std
::
string
&
out_name
:
desc
.
OutputName
())
{
if
(
no_grad_vars
.
count
(
out_name
))
{
desc
.
Rename
(
out_name
,
kEmptyVarName
);
}
}
}
grad_op_descs
.
insert
(
grad_op_descs
.
begin
(),
fill_zeros_ops
.
begin
(),
fill_zeros_ops
.
end
());
// TODO (fengjiayi): RNN op
return
grad_op_descs
;
}
}
// namespace framework
}
// namespace paddle
paddle/framework/backward.h
浏览文件 @
ff7fdb7d
...
...
@@ -23,5 +23,10 @@ namespace framework {
extern
std
::
unique_ptr
<
OperatorBase
>
Backward
(
const
OperatorBase
&
forwardOp
,
const
std
::
unordered_set
<
std
::
string
>&
no_grad_vars
);
extern
void
AppendBackwardOps
(
BlockDescBind
&
block_desc
,
const
std
::
unordered_set
<
std
::
string
>&
no_grad_vars
);
}
// namespace framework
}
// namespace paddle
paddle/framework/op_desc.cc
浏览文件 @
ff7fdb7d
...
...
@@ -18,6 +18,15 @@ limitations under the License. */
namespace
paddle
{
namespace
framework
{
OpDescBind
::
OpDescBind
(
const
std
::
string
&
type
,
const
VariableNameMap
&
inputs
,
const
VariableNameMap
&
outputs
,
const
AttributeMap
&
attrs
)
{
op_desc_
.
set_type
(
type
);
inputs_
=
inputs
;
outputs_
=
outputs
;
attrs_
=
attrs
;
}
OpDesc
*
OpDescBind
::
Proto
()
{
Sync
();
return
&
op_desc_
;
...
...
@@ -112,6 +121,17 @@ const std::unordered_map<std::string, Attribute> &OpDescBind::GetAttrMap()
return
attrs_
;
}
void
Rename
(
const
std
::
string
&
old_name
,
const
std
::
string
&
new_name
)
{
for
(
std
:
string
&
input
:
inputs_
)
{
std
::
replace
(
input
.
second
.
begin
(),
input
.
second
.
end
(),
old_name
,
new_name
);
}
for
(
std
::
string
&
output
:
outputs_
)
{
std
::
repalce
(
output
.
second
.
begin
(),
output
.
second
.
end
(),
old_name
,
new_name
);
}
need_update_
=
true
;
}
void
OpDescBind
::
Sync
()
{
if
(
need_update_
)
{
this
->
op_desc_
.
mutable_inputs
()
->
Clear
();
...
...
paddle/framework/op_desc.h
浏览文件 @
ff7fdb7d
...
...
@@ -26,6 +26,11 @@ class BlockDescBind;
class
OpDescBind
{
public:
OpDescBind
()
{}
OpDescBind
(
const
std
::
string
&
type
,
const
VariableNameMap
&
inputs
,
const
VariableNameMap
&
outputs
,
const
AttributeMap
&
attrs
);
OpDesc
*
Proto
();
std
::
string
Type
()
const
{
return
op_desc_
.
type
();
}
...
...
@@ -67,6 +72,8 @@ class OpDescBind {
int
GetBlockAttr
(
const
std
::
string
&
name
)
const
;
void
Rename
(
const
std
::
string
&
old_name
,
const
std
::
string
&
new_name
);
// Only be used in C++
const
std
::
unordered_map
<
std
::
string
,
Attribute
>
&
GetAttrMap
()
const
;
...
...
paddle/framework/op_registry.cc
浏览文件 @
ff7fdb7d
...
...
@@ -57,5 +57,10 @@ std::unique_ptr<OperatorBase> OpRegistry::CreateGradOp(const OperatorBase& op) {
return
std
::
unique_ptr
<
OperatorBase
>
(
BuildGradOp
(
&
op
));
}
static
std
::
vector
<
OpDescBind
>
CreateGradOpDescs
(
const
OpDescBind
&
op_desc
)
{
auto
&
info
=
OpInfoMap
::
Instance
().
Get
(
op_desc
.
Type
());
return
info
.
grad_op_maker_
(
op_desc
);
}
}
// namespace framework
}
// namespace paddle
paddle/framework/op_registry.h
浏览文件 @
ff7fdb7d
...
...
@@ -68,6 +68,8 @@ class OpRegistry {
static
std
::
unique_ptr
<
OperatorBase
>
CreateOp
(
const
OpDesc
&
op_desc
);
static
std
::
unique_ptr
<
OperatorBase
>
CreateGradOp
(
const
OperatorBase
&
op
);
static
std
::
vector
<
OpDescBind
>
CreateGradOpDescs
(
const
OpDescBind
&
op_desc
);
};
class
Registrar
{
...
...
编辑
预览
Markdown
is supported
0%
请重试
或
添加新附件
.
添加附件
取消
You are about to add
0
people
to the discussion. Proceed with caution.
先完成此消息的编辑!
取消
想要评论请
注册
或
登录