Skip to content
体验新版
项目
组织
正在加载...
登录
切换导航
打开侧边栏
PaddlePaddle
PGL
提交
69546bdc
P
PGL
项目概览
PaddlePaddle
/
PGL
通知
76
Star
4
Fork
0
代码
文件
提交
分支
Tags
贡献者
分支图
Diff
Issue
11
列表
看板
标记
里程碑
合并请求
1
Wiki
0
Wiki
分析
仓库
DevOps
项目成员
Pages
P
PGL
项目概览
项目概览
详情
发布
仓库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
Issue
11
Issue
11
列表
看板
标记
里程碑
合并请求
1
合并请求
1
Pages
分析
分析
仓库分析
DevOps
Wiki
0
Wiki
成员
成员
收起侧边栏
关闭侧边栏
动态
分支图
创建新Issue
提交
Issue看板
提交
69546bdc
编写于
8月 06, 2020
作者:
Y
Yelrose
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
add partial node feature
上级
88b4ada0
变更
2
隐藏空白更改
内联
并排
Showing
2 changed file
with
17 addition
and
15 deletion
+17
-15
pgl/graph_wrapper.py
pgl/graph_wrapper.py
+2
-15
pgl/utils/op.py
pgl/utils/op.py
+15
-0
未找到文件。
pgl/graph_wrapper.py
浏览文件 @
69546bdc
...
...
@@ -27,24 +27,11 @@ from pgl.utils.logger import log
__all__
=
[
"BaseGraphWrapper"
,
"GraphWrapper"
,
"StaticGraphWrapper"
]
class
ReadRows
(
object
):
"""Memory Efficient ReadRows
"""
def
__init__
(
self
,
nfeat
,
index
):
self
.
nfeat
=
nfeat
self
.
loaded_nfeat
=
{}
self
.
index
=
index
def
__getitem__
(
self
,
key
):
if
key
not
in
self
.
loaded_nfeat
:
self
.
loaded_nfeat
[
key
]
=
op
.
read_rows
(
self
.
nfeat
[
key
],
self
.
index
)
return
self
.
loaded_nfeat
[
key
]
def
send
(
src
,
dst
,
nfeat
,
efeat
,
message_func
):
"""Send message from src to dst.
"""
src_feat
=
ReadRows
(
nfeat
,
src
)
dst_feat
=
ReadRows
(
nfeat
,
dst
)
src_feat
=
op
.
RowReader
(
nfeat
,
src
)
dst_feat
=
op
.
RowReader
(
nfeat
,
dst
)
msg
=
message_func
(
src_feat
,
dst_feat
,
efeat
)
return
msg
...
...
pgl/utils/op.py
浏览文件 @
69546bdc
...
...
@@ -68,3 +68,18 @@ def read_rows(data, index):
return
new_data
else
:
return
paddle_helper
.
gather
(
data
,
index
)
class
RowReader
(
object
):
"""Memory Efficient RowReader
"""
def
__init__
(
self
,
nfeat
,
index
):
self
.
nfeat
=
nfeat
self
.
loaded_nfeat
=
{}
self
.
index
=
index
def
__getitem__
(
self
,
key
):
if
key
not
in
self
.
loaded_nfeat
:
self
.
loaded_nfeat
[
key
]
=
read_rows
(
self
.
nfeat
[
key
],
self
.
index
)
return
self
.
loaded_nfeat
[
key
]
编辑
预览
Markdown
is supported
0%
请重试
或
添加新附件
.
添加附件
取消
You are about to add
0
people
to the discussion. Proceed with caution.
先完成此消息的编辑!
取消
想要评论请
注册
或
登录