），结果 作为后续处理的输入向量 • 第三步：输入向量会被送到多层 Transformer 进行后续处理，每 层 Transformer 的参数不同，但都会让输入先经过一个线性投影层 • 第四步：线性投影层将输入向量投影到另一个维度空间，剔除不重 要的维度，将高维向量简化为低维向量 使用 Transformer 摆脱了人工标注数据集的缺陷，模型在质 量 上更优、更易于并行化，所需训练时间明显更少