[0101] 將第1層的問句編碼特征和第1層的圖像編碼特征輸入到第1層的第二跨注意力編碼模塊204?5中的第二跨注意力單元204?5?1，得到第1層的第二候選跨注意力特征。將第1層的第二候選跨注意力特征輸入第1層的第二跨注意力編碼模塊204?5中的第二隨機(jī)擦除單元204?5?2，得到第1層的第二擦除注意力特征。將第1層的第二擦除注意力特征輸入第1層的第二跨注意力編碼模塊204?5中的第二歸一化單元204?5?3，得到第1層的第二歸一化特征。將第1層的問句編碼特征和第1層的第二歸一化特征進(jìn)行疊加，得到第1層的第二跨注意力特征。 [0102] 在一個示范性實施例中，可以但不限于通過以下公式確定所述第i層的第二候選跨注意力特征： [0103] [0104] 其中， 表示所述第i層的第二候選跨注意力特征， 表示所述第i 層的圖像編碼特征， 表示所述第i層的問句編碼特征， 表示預(yù)先確 定的轉(zhuǎn)移矩陣， 表示所述第i層的圖像編碼特征對應(yīng)的權(quán)重值。 [0105] 在一個示范性實施例中，可以但不限于通過以下方式得到第i層的第三跨注意力特征：將所述第i層的目標(biāo)拼接特征和所述第i層的答案編碼特征輸入到所述第i層的第三跨注意力編碼模塊中的第三跨注意力單元，得到第i層的第三候選跨注意力特征，其中，所述第三跨注意力單元用于根據(jù)所述第i層的目標(biāo)拼接特征和所述第i層的答案編碼特征，確定所述第i層的目標(biāo)拼接特征對應(yīng)的權(quán)重值，并根據(jù)所述第i層的目標(biāo)拼接特征對應(yīng)的權(quán)重值以及所述第i層的目標(biāo)拼接特征，確定所述第i層的第三候選跨注意力特征；將所述第i層的第三候選跨注意力特征輸入所述第i層的第三跨注意力編碼模塊中的第三隨機(jī)擦除單元，得到第i層的第三擦除注意力特征，其中，所述第三隨機(jī)擦除單元用于對所述第i層的第三候選跨注意力特征中的部分特征值進(jìn)行置0，得到所述第i層的第三擦除注意力特征；將所述第i層的第三擦除注意力特征輸入所述第i層的第三跨注意力編碼模塊中的第三歸一化單元，得到所述第i層的第三歸一化特征，其中，所述第三歸一化單元用于對所述第i層的第三擦除注意力特征中的特征值進(jìn)行歸一化處理，得到所述第i層的第三歸一化特征；將所述第i層的目標(biāo)拼接特征和所述第i層的第三歸一化特征進(jìn)行疊加，得到所述第i層的第三跨注意力特征。 [0106] 可選的，在本實施例中，可以但不限于以第1層抗噪注意力模塊204中的第三跨注意力編碼模塊204?6為例，對本申請實施例中的得到第i層的第三跨注意力特征的過程進(jìn)行解釋說明，可以但不限于適用于本申請實施例。圖12是根據(jù)本申請實施例的一種確定第三跨注意力特征的示意圖，如圖12所示，第1層抗噪注意力模塊204中的第三跨注意力編碼模塊204?6包括第三跨注意力單元204?6?1、第三隨機(jī)擦除單元204?6?2和第三歸一化單元 204?6?3。 [0107] 將第1層的目標(biāo)拼接特征和第1層的答案編碼特征輸入到第1層的第三跨注意力編碼模塊204?6中的第三跨注意力單元204?6?1，得到第1層的第三候選跨注意力特征。將第1層的第三候選跨注意力特征輸入第1層的第三跨注意力編碼模塊204?6中的第三隨機(jī)擦除單元204?6?2，得到第1層的第三擦除注意力特征。將第1層的第三擦除注意力特征輸入第1層的第三跨注意力編碼模塊中的第三歸一化單元204?6?3，得到第1層的第三歸一化特征。 將第1層的目標(biāo)拼接特征和第1層的第三歸一化特征進(jìn)行疊加，得到第1層的第三跨注意力特征。 [0108] 在一個示范性實施例中，可以但不限于通過以下公式確定所述第i層的第三候選跨注意力特征： [0109] [0110] 其中， 表示所述第i層的第三候選跨注意力特征， 表示所述 第i層的目標(biāo)拼接特征， 表示所述第i層的答案編碼特征， 表示預(yù)先確定 的轉(zhuǎn)移矩陣， 表示所述第i層的目標(biāo)拼接特征對應(yīng)的權(quán)重值。 [0111] 在一個示范性實施例中，可以但不限于通過以下方式確定第i層抗噪注意力模塊輸出的圖像注意力特征和文本修復(fù)篩選特征：將所述第i層的第三跨注意力特征拆分成所述第i層抗噪注意力模塊輸出的圖像注意力特征和第i層的文本修復(fù)特征；根據(jù)所述第i層的文本修復(fù)特征和所述第i層的答案編碼特征，確定所述第i層的文本修復(fù)特征對應(yīng)的權(quán)重值；根據(jù)所述第i層的文本修復(fù)特征對應(yīng)的權(quán)重值與所述第i層的文本修復(fù)特征，確定所述第i層抗噪注意力模塊輸出的文本修復(fù)篩選特征。