基本信息

---

下载

文档摘要

---

Transformer模型相关知识要点测试试卷

Transformer模型相对于RNN模型的主要优势是什么？

1.更好的长距离依赖建模能力

2.更快的训练速度

3.更高的模型表达能力

4.以上都是(正确答案)

答案解析：Transformer模型通过自注意力机制实现了更好的长距离依赖建模能力，同时由于并行计算的特性，训练速度更快，并且拥有更高的模型表达能力。

Transformer模型的Encoder部分主要作用是什么？

1.生成输出序列

2.将输入信息进行压缩和抽象(正确答案)

3.进行词向量学习

4.以上都不是

答案解析：Transformer模型的Enc