买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉华为技术有限公司申请的专利神经网络模型优化方法及相关设备获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN115841134B 。

龙图腾网通过国家知识产权局官网在2026-05-12发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202111100770.X，技术领域涉及：G06N3/0464；该发明授权神经网络模型优化方法及相关设备是由孙云霄;周彧聪;钟钊设计研发完成，并于2021-09-18向国家知识产权局提交的专利申请。

本神经网络模型优化方法及相关设备在说明书摘要公布了：本方法通过处理第一神经网络模型得到第二神经网络模型，第二神经网络模型包括优化注意力层和至少两个在前网络层。其中，优化质询Query特征变换模块的输入是根据优化注意力层的至少一个在前网络层的输出特征得到的；优化键Key特征变换模块的输入是根据优化注意力层的至少一个在前网络层的输出特征得到的；优化值Value特征变换模块的输入是根据优化注意力层的至少一个在前网络层的输出特征得到的；优化质询Query特征变换模块、优化键Key特征变换模块、优化值Value特征变换模块中的至少一个特征变换模块的输入是根据优化注意力层的至少一个非相邻在前网络层的输出特征得到的。该方法增强了第二神经网络模型的表达能力。

本发明授权神经网络模型优化方法及相关设备在权利要求书中公布了：1.一种神经网络模型优化方法，其特征在于，包括以下步骤： 对第一神经网络模型进行优化处理得到第二神经网络模型；所述第一神经网络模型的任务包括以下至少一项：目标检测、目标分类、图像分类、机器翻译、语音识别或文本识别；其中， 所述第二神经网络模型包括优化注意力层和位于所述优化注意力层之前的至少两个在前网络层，所述至少两个在前网络层串联连接；所述优化注意力层包括优化质询Query特征变换模块、优化键Key特征变换模块以及优化值Value特征变换模块， 所述优化质询Query特征变换模块的输入是根据所述优化注意力层的至少一个在前网络层的输出特征得到的； 所述优化键Key特征变换模块的输入是根据所述优化注意力层的至少一个在前网络层的输出特征得到的； 所述优化值Value特征变换模块的输入是根据所述优化注意力层的至少一个在前网络层的输出特征得到的； 其中，所述优化质询Query特征变换模块、所述优化键Key特征变换模块、所述优化值Value特征变换模块中的至少一个特征变换模块的输入是根据所述优化注意力层的至少一个非相邻在前网络层的输出特征得到的。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人华为技术有限公司，其通讯地址为：518129 广东省深圳市龙岗区坂田华为总部办公楼；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。