Skip to content
体验新版
项目
组织
正在加载...
登录
切换导航
打开侧边栏
机器未来
Paddle
提交
6f1c91da
P
Paddle
项目概览
机器未来
/
Paddle
与 Fork 源项目一致
Fork自
PaddlePaddle / Paddle
通知
1
Star
1
Fork
0
代码
文件
提交
分支
Tags
贡献者
分支图
Diff
Issue
1
列表
看板
标记
里程碑
合并请求
0
Wiki
0
Wiki
分析
仓库
DevOps
项目成员
Pages
P
Paddle
项目概览
项目概览
详情
发布
仓库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
Issue
1
Issue
1
列表
看板
标记
里程碑
合并请求
0
合并请求
0
Pages
分析
分析
仓库分析
DevOps
Wiki
0
Wiki
成员
成员
收起侧边栏
关闭侧边栏
动态
分支图
创建新Issue
提交
Issue看板
提交
6f1c91da
编写于
6月 08, 2017
作者:
Q
qiaolongfei
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
refine code
上级
99dc6064
变更
3
隐藏空白更改
内联
并排
Showing
3 changed file
with
43 addition
and
32 deletion
+43
-32
go/pserver/cclient/test/main.c
go/pserver/cclient/test/main.c
+0
-1
paddle/trainer/NewRemoteParameterUpdater.cpp
paddle/trainer/NewRemoteParameterUpdater.cpp
+3
-3
paddle/trainer/NewRemoteParameterUpdater.h
paddle/trainer/NewRemoteParameterUpdater.h
+40
-28
未找到文件。
go/pserver/cclient/test/main.c
浏览文件 @
6f1c91da
...
...
@@ -14,7 +14,6 @@ int main() {
client
c
=
paddle_new_pserver_client
(
addr
,
1
);
retry:
if
(
paddle_begin_init_params
(
c
))
{
paddle_parameter
param
;
char
name_a
[]
=
"param_a"
;
char
name_b
[]
=
"param_b"
;
...
...
paddle/trainer/NewRemoteParameterUpdater.cpp
浏览文件 @
6f1c91da
...
...
@@ -45,8 +45,8 @@ void NewRemoteParameterUpdater::init(
}
// init new parameter and gradient.
initNewParameter
(
newParameters_
,
PARAMETER_VALUE
);
initNewParameter
(
newGradients_
,
PARAMETER_GRADIENT
);
newParameters_
=
initNewParameter
(
PARAMETER_VALUE
);
newGradients_
=
initNewParameter
(
PARAMETER_GRADIENT
);
// init parameter, one trainer will get the opportunity to int parameter and
// send them to parameter server. Others will get the initialized parameter
...
...
@@ -60,7 +60,7 @@ void NewRemoteParameterUpdater::init(
LOG
(
INFO
)
<<
"paddle_begin_init_params done"
;
}
else
{
paddle_get_params
(
parameterClient_
,
names_
,
newParameters_
,
(
int
)
parameters_
.
s
ize
());
parameterClient_
,
names_
,
newParameters_
,
parameterS
ize
());
}
LOG
(
INFO
)
<<
"NewRemoteParameterUpdater initialized"
;
...
...
paddle/trainer/NewRemoteParameterUpdater.h
浏览文件 @
6f1c91da
...
...
@@ -32,9 +32,9 @@ public:
NewRemoteParameterUpdater
(
const
OptimizationConfig
&
config
,
const
std
::
string
pserverSpec
);
~
NewRemoteParameterUpdater
()
{
if
(
newGradients_
)
{
paddle_pserver_client_release
(
parameterClient
_
);
}
releaseNewParameter
(
newParameters_
);
releaseNewParameter
(
newGradients
_
);
if
(
parameterClient_
>=
0
)
paddle_pserver_client_release
(
parameterClient_
);
}
/**
...
...
@@ -57,37 +57,49 @@ public:
virtual
void
startPass
();
virtual
bool
finishPass
();
int
parameterSize
()
{
return
(
int
)
parameters_
.
size
();
}
protected:
/**
* init parameter of paddle pserver cclient.
* @param new_paras
* @param type
* work need to do after finishBatch
*/
void
initNewParameter
(
paddle_parameter
**&
new_paras
,
ParameterType
type
)
{
new_paras
=
(
paddle_parameter
**
)
malloc
(
sizeof
(
paddle_parameter
*
)
*
parameterSize
());
for
(
int
i
=
0
;
i
<
parameterSize
();
++
i
)
{
new_paras
[
i
]
=
(
paddle_parameter
*
)
malloc
(
sizeof
(
paddle_parameter
));
memset
(
new_paras
[
i
],
0
,
sizeof
(
paddle_parameter
));
virtual
void
updateImpl
(
Parameter
*
para
);
private:
int
parameterSize
()
{
return
(
int
)
parameters_
.
size
();
}
for
(
int
i
=
0
;
i
<
parameterSize
();
++
i
)
{
ParameterPtr
para
=
parameters_
[
i
];
new_paras
[
i
]
->
content_len
=
10
;
new_paras
[
i
]
->
element_type
=
PADDLE_ELEMENT_TYPE_FLOAT32
;
new_paras
[
i
]
->
name
=
(
char
*
)
para
->
getName
().
c_str
();
new_paras
[
i
]
->
content
=
(
unsigned
char
*
)(
para
->
getBuf
(
type
).
get
()
->
getData
());
new_paras
[
i
]
->
content_len
=
(
int
)
para
->
getBuf
(
type
).
get
()
->
getSize
();
/**
* init parameter of paddle pserver cclient.
* @param new_params
* @param type
*/
paddle_parameter
**
initNewParameter
(
ParameterType
type
)
{
paddle_parameter
**
new_params
=
(
paddle_parameter
**
)
malloc
(
sizeof
(
paddle_parameter
*
)
*
parameterSize
());
for
(
int
i
=
0
;
i
<
parameterSize
();
++
i
)
{
new_params
[
i
]
=
(
paddle_parameter
*
)
malloc
(
sizeof
(
paddle_parameter
));
memset
(
new_params
[
i
],
0
,
sizeof
(
paddle_parameter
));
}
for
(
int
i
=
0
;
i
<
parameterSize
();
++
i
)
{
ParameterPtr
param
=
parameters_
[
i
];
new_params
[
i
]
->
content_len
=
10
;
new_params
[
i
]
->
element_type
=
PADDLE_ELEMENT_TYPE_FLOAT32
;
new_params
[
i
]
->
name
=
(
char
*
)
param
->
getName
().
c_str
();
new_params
[
i
]
->
content
=
(
unsigned
char
*
)(
param
->
getBuf
(
type
).
get
()
->
getData
());
new_params
[
i
]
->
content_len
=
(
int
)
param
->
getBuf
(
type
).
get
()
->
getSize
();
}
return
new_params
;
}
}
protected:
/**
* work need to do after finishBatch
*/
virtual
void
updateImpl
(
Parameter
*
para
);
void
releaseNewParameter
(
paddle_parameter
**
newParams
)
{
if
(
newParams
!=
NULL
)
{
for
(
int
i
=
0
;
i
<
parameterSize
();
++
i
)
{
paddle_release_param
(
newParams
[
i
]);
}
}
}
protected:
/// internal parameter client object for exchanging data with pserver
...
...
编辑
预览
Markdown
is supported
0%
请重试
或
添加新附件
.
添加附件
取消
You are about to add
0
people
to the discussion. Proceed with caution.
先完成此消息的编辑!
取消
想要评论请
注册
或
登录