多层感知机

MLP是最基础的神经网络结构，由输入层、一个或多个隐藏层和输出层组成，每层之间全连接。在Transformer中，MLP通常作为前馈网络（FFN）模块，对每个位置独立进行非线性变换。