基于多视图联合嵌入空间的图像‑文本双向检索方法与流程

文档序号:12887303阅读:来源:国知局

技术特征:

技术总结
本发明公布了一种基于多视图联合嵌入空间的图像‑文本双向检索方法,通过结合全局层面和局部层面的语义关联关系进行检索;先从画面‑句子视图和区域‑短语视图下分别获得全局和局部层面的语义关联关系,在画面‑句子视图中获取画面和句子全局层面子空间中的语义关联信息;在区域‑短语视图中获取区域和短语局部层面子空间中的语义关联信息;两个视图中均通过双分支的神经网络处理数据得到同构特征嵌入共同空间,在训练中使用约束条件保留数据原有的语义关系;再通过多视图融合排序方法融合两种语义关联关系得到数据之间更精准的语义相似度,使得检索结果准确度更高。

技术研发人员:王文敏;冉璐;王荣刚;李革;董胜富;王振宇;李英;赵辉;高文
受保护的技术使用者:北京大学深圳研究生院
技术研发日:2017.07.06
技术公布日:2017.11.07
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1