这里主要介绍Attention机制在图像标注上的应用,首先介绍未引入Attention机制的图像标注系统。
数据集使用coco,其中提供了python API供使用,cocoapi。
Attention and Memory in Deep Learning and NLP
ATTENTION MECHANISM 介绍了attention机制在图像标注中的内部结构。对应的中文翻译Attention Model 注意力机制
image_captioning 使用LSTM进行图像标注(未使用Attention机制)。
image-captioning 该仓库大体相同,增加Attention机制同时增加VGG,ResNet和LSTM,GRU等模块的比较。
Image / Video Captioning handong1587跟踪的图像标注相关文章。