• 热门行业
  • 装修建材
  • 家居生活
  • 餐饮食品
  • 母婴教育
  • 电脑办公
  • 服装首饰
  • 汽车工具
  • 家电数码
  • 机械化工
  • 休闲美容
返回上一页
专利状态
一种跨模态信息检索方法和装置
有效
专利申请进度
申请
2021-07-02
申请公布
2021-09-24
授权
2024-01-26
预估到期
2041-07-02
专利基础信息
申请号 CN202110751989.X 申请日 2021-07-02
申请公布号 CN113434716A 申请公布日 2021-09-24
授权公布号 CN113434716B 授权公告日 2024-01-26
分类号 G06F16/532;G06F16/583;G06F16/55;G06F16/33;G06F40/289;G06F40/30;G06N3/045;G06N3/042;G06N3/0442;G06N3/0464
分类 计算;推算;计数;
申请人名称 泰康保险集团股份有限公司
申请人地址 北京市西城区复兴门内大街156号泰康人寿大厦
专利法律状态
  • 2024-01-26
    授权
    状态信息
    授权
  • 2021-10-15
    实质审查的生效
    状态信息
    实质审查的生效;IPC(主分类):G06F16/532;申请日:20210702
  • 2021-09-24
    公布
    状态信息
    公布
摘要
本发明公开了一种跨模态信息检索方法和装置,涉及计算机技术领域。该方法的一具体实施方式包括:对输入的图像集中的图像分别进行区域特征提取,得到对应的区域特征矩阵;使用图卷积网络推理归属于同一图像的多个区域特征向量之间的相关性,生成区域特征矩阵所对应的语义关系增强的区域信息关联特征矩阵;使用循环神经网络对区域信息关联特征矩阵进行全局语义推理,得到图像对应的全局语义特征矩阵;在接收到包括检索文本的检索指令的情况下,从检索文本中提取文本特征矩阵,查找与文本特征矩阵相匹配的全局语义特征矩阵,输出查找出的全局语义特征矩阵对应的图像。该方法将图卷积网络和循环神经网络相结合,可由文本描述快速检索到匹配的图像。