1. 您所在位置：
  2. 网站首页
  3. 专利分类
  4. 物理
发明

一种多模态的用户心智感知问答模型的构建方法2024

2023-11-16 07:27:25 发布于四川 33
  • 申请专利号：CN202311071584.7
  • 公开（公告）日：2024-11-26
  • 公开（公告）号：CN117033602A
  • 申请人：北京邮电大学
摘要：本发明公开了一种多模态的用户心智感知问答模型的构建方法，涉及多模态智能问答技术领域。包括构建信息融合模块、构建基于强化学习的策略网络、构建基于问题相似度的用户反馈模块。本发明在模型中引入场景图形式的视觉信息，能够有效融合多轮对话历史信息及图像场景图信息，使得模型能够获取到图像语义级别的信息，场景图的结构化数据形式也增强了模型推理的可解释性；并且提出的基于问题相似度的用户反馈获取方法为模型引入了用户反馈信号，相较于传统问答模型能够更智能地推测出用户对于答案的反馈，利用该反馈可以引导模型后续的策略网络训练，使模型的推理向更靠近用户心智的方向进行，为用户提供更好的人机服务体验。

专利内容

(19)国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 117033602 A (43)申请公布日 2023.11.10 (21)申请号 202311071584.7 G06N 5/022 (2023.01) G06N 3/048 (2023.01) (22)申请日 2023.08.24 G06N 3/0464 (2023.01) (71)申请人 北京邮电大学 G06N 3/047 (2023.01) 地址 100876 北京市海淀区西土城路10号 G06N 3/0455 (2023.01) (72)发明人 乔媛媛　吕菲　林文辉　宋颖　 杨洁　 (74)专利代理机构 北京睿智保诚专利代理事务 所(普通合伙) 11732 专利代理师 郭洁 (51)Int.Cl. G06F 16/332 (2019.01) G06F 16/33 (2019.01) G06F 16/335 (2019.01) G06F 16/2458 (2019.01) G06F 40/35 (2020.01)

最新专利

相关专利