Skip to content
体验新版
项目
组织
正在加载...
登录
切换导航
打开侧边栏
wmsofts
Paddle
提交
0d096b3b
P
Paddle
项目概览
wmsofts
/
Paddle
与 Fork 源项目一致
Fork自
PaddlePaddle / Paddle
通知
1
Star
0
Fork
0
代码
文件
提交
分支
Tags
贡献者
分支图
Diff
Issue
0
列表
看板
标记
里程碑
合并请求
0
Wiki
0
Wiki
分析
仓库
DevOps
项目成员
Pages
P
Paddle
项目概览
项目概览
详情
发布
仓库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
Issue
0
Issue
0
列表
看板
标记
里程碑
合并请求
0
合并请求
0
Pages
分析
分析
仓库分析
DevOps
Wiki
0
Wiki
成员
成员
收起侧边栏
关闭侧边栏
动态
分支图
创建新Issue
提交
Issue看板
体验新版 GitCode,发现更多精彩内容 >>
未验证
提交
0d096b3b
编写于
3月 10, 2023
作者:
W
wuhuachaocoding
提交者:
GitHub
3月 10, 2023
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
update some log. (#51274)
上级
38d233d9
变更
2
显示空白变更内容
内联
并排
Showing
2 changed file
with
2 addition
and
10 deletion
+2
-10
python/paddle/distributed/fleet/meta_parallel/sharding/group_sharded_stage2.py
...uted/fleet/meta_parallel/sharding/group_sharded_stage2.py
+0
-8
python/paddle/distributed/fleet/utils/hybrid_parallel_util.py
...on/paddle/distributed/fleet/utils/hybrid_parallel_util.py
+2
-2
未找到文件。
python/paddle/distributed/fleet/meta_parallel/sharding/group_sharded_stage2.py
浏览文件 @
0d096b3b
...
...
@@ -539,14 +539,6 @@ class GroupShardedStage2(nn.Layer):
self
.
_has_grad_storage
[
index
]
=
True
else
:
self
.
_param_grads
.
append
(
param
.
name
)
print
(
"Can not add param: {}, param's shape: {}, param align: {}, grad_storages fill: {}, "
.
format
(
param
.
name
,
param
.
shape
,
self
.
_trainable_param2align
[
param
.
name
],
self
.
_grad_storages
[
param
.
dtype
][
dst_rank
].
_fill
,
)
)
for
dtype
in
self
.
_grad_storages
.
keys
():
self
.
_grad_storage_list
.
extend
(
...
...
python/paddle/distributed/fleet/utils/hybrid_parallel_util.py
浏览文件 @
0d096b3b
...
...
@@ -159,7 +159,7 @@ def broadcast_input_data(hcg, *inputs, **kwargs):
v_gpu
.
_share_buffer_to
(
v
)
_broadcast_data_help
(
v
,
v
.
shape
,
v
.
dtype
,
hcg
)
else
:
logger
.
error
(
"it doesn't support data type {}"
.
format
(
type
(
v
)))
logger
.
warning
(
"it doesn't support data type {}"
.
format
(
type
(
v
)))
for
k
,
v
in
kwargs
.
items
():
if
isinstance
(
v
,
(
core
.
VarBase
,
core
.
eager
.
Tensor
)):
...
...
@@ -171,7 +171,7 @@ def broadcast_input_data(hcg, *inputs, **kwargs):
_broadcast_data_help
(
v
,
v
.
shape
,
v
.
dtype
,
hcg
)
kwargs
[
k
]
=
v
else
:
logger
.
error
(
"it doesn't support data type {}"
.
format
(
type
(
v
)))
logger
.
warning
(
"it doesn't support data type {}"
.
format
(
type
(
v
)))
return
inputs
,
kwargs
...
...
编辑
预览
Markdown
is supported
0%
请重试
或
添加新附件
.
添加附件
取消
You are about to add
0
people
to the discussion. Proceed with caution.
先完成此消息的编辑!
取消
想要评论请
注册
或
登录