Attention Is All You Need (Transformer) 精读笔记

📝 个人思考

提出了 Transformer 架构，引入 Self-Attention（自注意力机制）和 Positional Encoding（位置编码）。它解决了长距离依赖问题，并极大地提高了训练的并行度。