重构论文结构,更新章节内容
This commit is contained in:
@@ -12,12 +12,9 @@
|
||||
\item 难以处理不同位置间的长距离依赖关系
|
||||
\end{itemize}
|
||||
|
||||
Self-attention机制的出现为解决这些问题提供了新的思路。通过引入2D相对位置编码,我们可以:
|
||||
\begin{itemize}
|
||||
\item 显式建模网格中任意两个位置间的关系
|
||||
\item 捕获全局的状态信息
|
||||
\item 学习位置无关的特征表示
|
||||
\end{itemize}
|
||||
Self-attention机制的出现为解决这些问题提供了新的思路。
|
||||
通过引入2D相对位置编码,我们可以在捕获全局状态信息的同时,对棋盘任意两个位置的关系进行建模,
|
||||
同时学习到位置无关的特征表示。
|
||||
|
||||
\subsection{符号定义}
|
||||
\begin{itemize}
|
||||
|
||||
Reference in New Issue
Block a user