Generation and Comprehension of Unambiguous Object Descriptions

来源:互联网 发布:微信跳转淘宝 编辑:程序博客网 时间:2024/06/06 03:11

CVPR 2016

https://github.com/mjhucla/Google_Refexp_toolbox

本文主要包括两个模块,一个是描述生成,Description Generation ,对于图像中一个区域或特定物体会生成一个没有歧义的描述(known as a referring expression)。另一个模块是 描述理解 Description Comprehension,给定一幅图像及其所有的候选区域,以及一个referring expression,选择出对应描述的区域。

这里写图片描述

采用的模型是 Region CNN + LSTM

这里写图片描述

这里写图片描述

description generation 的结果

这里写图片描述

description comprehension 的结果

这里写图片描述

感觉人工智能越来越有希望啊!

0 0
原创粉丝点击