买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉华为技术有限公司申请的专利多模态训练方法、电子设备及存储介质获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN115204259B 。

龙图腾网通过国家知识产权局官网在2026-04-07发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202210653824.3，技术领域涉及：G06V10/774；该发明授权多模态训练方法、电子设备及存储介质是由颜世鹏;洪蓝青;徐航;韩建华;李震国设计研发完成，并于2022-06-09向国家知识产权局提交的专利申请。

本多模态训练方法、电子设备及存储介质在说明书摘要公布了：本申请实施例提供一种多模态训练方法、电子设备及存储介质，涉及人工智能领域，该方法包括：使用本批训练样本集中的真实样本对多模态预训练模型进行训练；在训练过程中，以负样本的形式构建伪样本，将伪样本进行重放，以使得多模态预训练模型基于伪样本进行重新学习。本申请实施例提供的方法，有助于减少在多模态训练中的知识的遗忘。

本发明授权多模态训练方法、电子设备及存储介质在权利要求书中公布了：1.一种多模态训练方法，其特征在于，应用于多模态预训练模型，所述方法包括： 使用本批训练样本集中的真实样本对所述多模态预训练模型进行训练； 在训练过程中，以负样本的形式构建伪样本，将所述伪样本进行重放，以使得所述多模态预训练模型基于所述伪样本进行重新学习； 其中，所述多模态预训练模型为视觉-语言预训练模型，所述真实样本为真实图像及真实文本的组合，所述伪样本为伪文本及真实图像的组合，或所述伪样本为真实文本及伪图像的组合，或所述伪样本为伪文本及伪图像的组合； 所述以负样本的形式构建伪样本包括： 获取第一图像及第一文本，所述第一图像为所述本批训练样本集中的任一真实图像，所述第一文本为初始化伪文本； 通过第二文本编码器对所述第一文本提取特征，用于获得第二文本特征，其中，所述第二文本编码器为与第一文本编码器相邻的上一时刻的文本编码器，所述第一文本编码器用于对所述本批训练样本集中的真实文本提取特征，以获得第一文本特征； 基于第二图像特征及所述第二文本特征，并以负样本的形式构建伪文本，将所述伪文本及所述第一图像的组合作为伪样本，其中，所述第二图像特征包括通过第二图像编码器对所述本批训练样本集中的每个真实图像提取后获得的特征，所述第二图像编码器为与第一图像编码器相邻的上一时刻的图像编码器，所述第一图像编码器用于对所述本批训练样本集中的真实图像提取特征，以获得第一图像特征。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人华为技术有限公司，其通讯地址为：518129 广东省深圳市龙岗区坂田华为总部办公楼；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。