Skip to content
体验新版
项目
组织
正在加载...
登录
切换导航
打开侧边栏
OpenDocCN
d2l-zh
提交
b1dafb6d
D
d2l-zh
项目概览
OpenDocCN
/
d2l-zh
通知
2
Star
0
Fork
0
代码
文件
提交
分支
Tags
贡献者
分支图
Diff
Issue
0
列表
看板
标记
里程碑
合并请求
0
Wiki
0
Wiki
分析
仓库
DevOps
项目成员
Pages
D
d2l-zh
项目概览
项目概览
详情
发布
仓库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
Issue
0
Issue
0
列表
看板
标记
里程碑
合并请求
0
合并请求
0
Pages
分析
分析
仓库分析
DevOps
Wiki
0
Wiki
成员
成员
收起侧边栏
关闭侧边栏
动态
分支图
创建新Issue
提交
Issue看板
前往新版Gitcode,体验更适合开发者的 AI 搜索 >>
提交
b1dafb6d
编写于
2月 06, 2018
作者:
A
Aston Zhang
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
subscript fix
上级
53bfea78
变更
1
隐藏空白更改
内联
并排
Showing
1 changed file
with
4 addition
and
4 deletion
+4
-4
chapter_natural-language-processing/seq2seq-attention.md
chapter_natural-language-processing/seq2seq-attention.md
+4
-4
未找到文件。
chapter_natural-language-processing/seq2seq-attention.md
浏览文件 @
b1dafb6d
...
...
@@ -53,7 +53,7 @@ $$\overleftarrow{\mathbf{h}}_t = f(\mathbf{x}_t, \overleftarrow{\mathbf{h}}_{t+1
![](
../img/bi-rnn.svg
)
```
{.python .input}
```
{.python .input
n=1
}
# 连结两个向量。
from mxnet import nd
h_forward = nd.array([1, 2])
...
...
@@ -127,11 +127,11 @@ $$\mathbf{s}_{t^\prime} = \mathbf{z}_{t^\prime} \odot \mathbf{s}_{t^\prime-1} +
其中的重置门、更新门和候选隐含状态分别为
$$
\m
athbf{r}_{t^
\p
rime} =
\s
igma(
\m
athbf{W}_{yr}
\m
athbf{y}_{t^
\p
rime} +
\m
athbf{W}_{sr}
\m
athbf{s}_{t^
\p
rime - 1} +
\m
athbf{W}_{cr}
\m
athbf{c}_{t^
\p
rime} +
\m
athbf{b}_r)$$
$$
\m
athbf{r}_{t^
\p
rime} =
\s
igma(
\m
athbf{W}_{yr}
\m
athbf{y}_{t^
\p
rime
-1
} +
\m
athbf{W}_{sr}
\m
athbf{s}_{t^
\p
rime - 1} +
\m
athbf{W}_{cr}
\m
athbf{c}_{t^
\p
rime} +
\m
athbf{b}_r)$$
$$
\m
athbf{z}_{t^
\p
rime} =
\s
igma(
\m
athbf{W}_{yz}
\m
athbf{y}_{t^
\p
rime} +
\m
athbf{W}_{sz}
\m
athbf{s}_{t^
\p
rime - 1} +
\m
athbf{W}_{cz}
\m
athbf{c}_{t^
\p
rime} +
\m
athbf{b}_z)$$
$$
\m
athbf{z}_{t^
\p
rime} =
\s
igma(
\m
athbf{W}_{yz}
\m
athbf{y}_{t^
\p
rime
-1
} +
\m
athbf{W}_{sz}
\m
athbf{s}_{t^
\p
rime - 1} +
\m
athbf{W}_{cz}
\m
athbf{c}_{t^
\p
rime} +
\m
athbf{b}_z)$$
$$
\t
ilde{
\m
athbf{s}}_{t^
\p
rime} =
\t
ext{tanh}(
\m
athbf{W}_{ys}
\m
athbf{y}_{t^
\p
rime} +
\m
athbf{W}_{ss} (
\m
athbf{s}_{t^
\p
rime - 1}
\o
dot
\m
athbf{r}_{t^
\p
rime}) +
\m
athbf{W}_{cs}
\m
athbf{c}_{t^
\p
rime} +
\m
athbf{b}_s)$$
$$
\t
ilde{
\m
athbf{s}}_{t^
\p
rime} =
\t
ext{tanh}(
\m
athbf{W}_{ys}
\m
athbf{y}_{t^
\p
rime
-1
} +
\m
athbf{W}_{ss} (
\m
athbf{s}_{t^
\p
rime - 1}
\o
dot
\m
athbf{r}_{t^
\p
rime}) +
\m
athbf{W}_{cs}
\m
athbf{c}_{t^
\p
rime} +
\m
athbf{b}_s)$$
## 结论
...
...
编辑
预览
Markdown
is supported
0%
请重试
或
添加新附件
.
添加附件
取消
You are about to add
0
people
to the discussion. Proceed with caution.
先完成此消息的编辑!
取消
想要评论请
注册
或
登录