Gobal Attention的目的：是为了在生成上下文向量（也可以认为是句向量）时将所有的hidden state都考虑进去。Attention机制认为每个单词在一句话中的重要程度是不一样的，通过学习得到一句话中每个单词的权重。即为关注重要特征，忽略无关特征。
本代码采样keras2.2.4\tensorflow1.12进行实现的。
2022-08-17 21:05:20
28KB
1