Skip to content
体验新版
项目
组织
正在加载...
登录
切换导航
打开侧边栏
PaddlePaddle
DeepSpeech
提交
e6ac8881
D
DeepSpeech
项目概览
PaddlePaddle
/
DeepSpeech
大约 2 年 前同步成功
通知
210
Star
8425
Fork
1598
代码
文件
提交
分支
Tags
贡献者
分支图
Diff
Issue
245
列表
看板
标记
里程碑
合并请求
3
Wiki
0
Wiki
分析
仓库
DevOps
项目成员
Pages
D
DeepSpeech
项目概览
项目概览
详情
发布
仓库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
Issue
245
Issue
245
列表
看板
标记
里程碑
合并请求
3
合并请求
3
Pages
分析
分析
仓库分析
DevOps
Wiki
0
Wiki
成员
成员
收起侧边栏
关闭侧边栏
动态
分支图
创建新Issue
提交
Issue看板
提交
e6ac8881
编写于
7月 19, 2022
作者:
0
0x45f
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
Fix comments
上级
ac680aa7
变更
3
显示空白变更内容
内联
并排
Showing
3 changed file
with
8 addition
and
5 deletion
+8
-5
paddlespeech/s2t/models/u2/u2.py
paddlespeech/s2t/models/u2/u2.py
+4
-2
paddlespeech/s2t/modules/encoder.py
paddlespeech/s2t/modules/encoder.py
+3
-3
paddlespeech/s2t/modules/encoder_layer.py
paddlespeech/s2t/modules/encoder_layer.py
+1
-0
未找到文件。
paddlespeech/s2t/models/u2/u2.py
浏览文件 @
e6ac8881
...
...
@@ -625,10 +625,12 @@ class U2BaseModel(ASRInterface, nn.Layer):
(elayers, head, cache_t1, d_k * 2), where
`head * d_k == hidden-dim` and
`cache_t1 == chunk_size * num_decoding_left_chunks`.
`d_k * 2` for att key & value.
`d_k * 2` for att key & value. Default is 0-dims Tensor,
it is used for dy2st.
cnn_cache (paddle.Tensor): cache tensor for cnn_module in conformer,
(elayers, b=1, hidden-dim, cache_t2), where
`cache_t2 == cnn.lorder - 1`
`cache_t2 == cnn.lorder - 1`. Default is 0-dims Tensor,
it is used for dy2st.
Returns:
paddle.Tensor: output of current input xs,
...
...
paddlespeech/s2t/modules/encoder.py
浏览文件 @
e6ac8881
...
...
@@ -250,11 +250,11 @@ class BaseEncoder(nn.Layer):
r_cnn_cache
=
[]
for
i
,
layer
in
enumerate
(
self
.
encoders
):
# att_cache[i:i+1] = (1, head, cache_t1, d_k*2)
# cnn_cache[i
] = (
B=1, hidden-dim, cache_t2)
# cnn_cache[i
:i+1] = (1,
B=1, hidden-dim, cache_t2)
xs
,
_
,
new_att_cache
,
new_cnn_cache
=
layer
(
xs
,
att_mask
,
pos_emb
,
att_cache
=
att_cache
if
elayers
==
0
else
att_cache
[
i
:
i
+
1
]
,
cnn_cache
=
cnn_cache
if
paddle
.
shape
(
cnn_cache
)[
0
]
==
0
else
cnn_cache
[
i
]
,
att_cache
=
att_cache
[
i
:
i
+
1
]
if
elayers
>
0
else
att_cache
,
cnn_cache
=
cnn_cache
[
i
:
i
+
1
]
if
paddle
.
shape
(
cnn_cache
)[
0
]
>
0
else
cnn_cache
,
)
# new_att_cache = (1, head, attention_key_size, d_k*2)
# new_cnn_cache = (B=1, hidden-dim, cache_t2)
...
...
paddlespeech/s2t/modules/encoder_layer.py
浏览文件 @
e6ac8881
...
...
@@ -250,6 +250,7 @@ class ConformerEncoderLayer(nn.Layer):
# convolution module
# Fake new cnn cache here, and then change it in conv_module
new_cnn_cache
=
paddle
.
zeros
([
0
,
0
,
0
],
dtype
=
x
.
dtype
)
cnn_cache
=
paddle
.
squeeze
(
cnn_cache
,
axis
=
0
)
if
self
.
conv_module
is
not
None
:
residual
=
x
if
self
.
normalize_before
:
...
...
编辑
预览
Markdown
is supported
0%
请重试
或
添加新附件
.
添加附件
取消
You are about to add
0
people
to the discussion. Proceed with caution.
先完成此消息的编辑!
取消
想要评论请
注册
或
登录