RoBERTa模型输入向量构成，卷积神经网络（convolutional neural network,CNN），是一类包含卷积计算且具有深度结构的前馈神经网络。