Skip to content
体验新版
项目
组织
正在加载...
登录
切换导航
打开侧边栏
PaddlePaddle
ERNIE
提交
ec898861
E
ERNIE
项目概览
PaddlePaddle
/
ERNIE
大约 1 年 前同步成功
通知
109
Star
5997
Fork
1270
代码
文件
提交
分支
Tags
贡献者
分支图
Diff
Issue
29
列表
看板
标记
里程碑
合并请求
0
Wiki
0
Wiki
分析
仓库
DevOps
项目成员
Pages
E
ERNIE
项目概览
项目概览
详情
发布
仓库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
Issue
29
Issue
29
列表
看板
标记
里程碑
合并请求
0
合并请求
0
Pages
分析
分析
仓库分析
DevOps
Wiki
0
Wiki
成员
成员
收起侧边栏
关闭侧边栏
动态
分支图
创建新Issue
提交
Issue看板
提交
ec898861
编写于
1月 16, 2020
作者:
C
chenxuyi
提交者:
Meiyim
1月 16, 2020
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
propeller server 1.6 compat
上级
2660a5c2
变更
2
显示空白变更内容
内联
并排
Showing
2 changed file
with
6 addition
and
7 deletion
+6
-7
ernie/service/encoder_server.py
ernie/service/encoder_server.py
+2
-0
propeller/service/utils.py
propeller/service/utils.py
+4
-7
未找到文件。
ernie/service/encoder_server.py
浏览文件 @
ec898861
...
@@ -54,6 +54,8 @@ if __name__ == "__main__":
...
@@ -54,6 +54,8 @@ if __name__ == "__main__":
raise
RuntimeError
(
'CUDA_VISIBLE_DEVICES not set'
)
raise
RuntimeError
(
'CUDA_VISIBLE_DEVICES not set'
)
if
not
os
.
path
.
exists
(
args
.
model_dir
):
if
not
os
.
path
.
exists
(
args
.
model_dir
):
raise
ValueError
(
'model_dir not found: %s'
%
args
.
model_dir
)
raise
ValueError
(
'model_dir not found: %s'
%
args
.
model_dir
)
if
not
os
.
path
.
exists
(
args
.
model_dir
):
raise
ValueError
(
'model_dir not found: %s'
%
args
.
model_dir
)
n_devices
=
len
(
cuda_env
.
split
(
","
))
n_devices
=
len
(
cuda_env
.
split
(
","
))
if
args
.
encode_layer
.
lower
()
==
'pooler'
:
if
args
.
encode_layer
.
lower
()
==
'pooler'
:
model_dir
=
os
.
path
.
join
(
args
.
model_dir
,
'pooler'
)
model_dir
=
os
.
path
.
join
(
args
.
model_dir
,
'pooler'
)
...
...
propeller/service/utils.py
浏览文件 @
ec898861
...
@@ -65,22 +65,19 @@ def slot_to_paddlearray(slot):
...
@@ -65,22 +65,19 @@ def slot_to_paddlearray(slot):
"""doc"""
"""doc"""
import
paddle.fluid.core
as
core
import
paddle.fluid.core
as
core
if
slot
.
type
==
interface_pb2
.
Slot
.
FP32
:
if
slot
.
type
==
interface_pb2
.
Slot
.
FP32
:
dtype
=
np
.
float32
type_str
=
'f'
type_str
=
'f'
dtype
=
core
.
PaddleDType
.
FLOAT32
elif
slot
.
type
==
interface_pb2
.
Slot
.
INT32
:
elif
slot
.
type
==
interface_pb2
.
Slot
.
INT32
:
dtype
=
np
.
int32
type_str
=
'i'
type_str
=
'i'
dtype
=
core
.
PaddleDType
.
INT32
elif
slot
.
type
==
interface_pb2
.
Slot
.
INT64
:
elif
slot
.
type
==
interface_pb2
.
Slot
.
INT64
:
dtype
=
np
.
int64
type_str
=
'q'
type_str
=
'q'
dtype
=
core
.
PaddleDType
.
INT64
else
:
else
:
raise
RuntimeError
(
'know type %s'
%
slot
.
type
)
raise
RuntimeError
(
'know type %s'
%
slot
.
type
)
ret
=
core
.
PaddleTensor
()
ret
.
shape
=
slot
.
dims
ret
.
dtype
=
dtype
num
=
len
(
slot
.
data
)
//
struct
.
calcsize
(
type_str
)
num
=
len
(
slot
.
data
)
//
struct
.
calcsize
(
type_str
)
arr
=
struct
.
unpack
(
'%d%s'
%
(
num
,
type_str
),
slot
.
data
)
arr
=
struct
.
unpack
(
'%d%s'
%
(
num
,
type_str
),
slot
.
data
)
ret
.
data
=
core
.
PaddleBuf
(
arr
)
ret
=
core
.
PaddleTensor
(
data
=
np
.
array
(
arr
,
dtype
=
dtype
).
reshape
(
slot
.
dims
)
)
return
ret
return
ret
...
...
编辑
预览
Markdown
is supported
0%
请重试
或
添加新附件
.
添加附件
取消
You are about to add
0
people
to the discussion. Proceed with caution.
先完成此消息的编辑!
取消
想要评论请
注册
或
登录