图像描述(ImageCaption)任务简析
看那个码农
共 3663字,需浏览 8分钟
·
2020-11-27 22:03
本文小媛仅仅介绍了该任务的背景与相关研究
希望通过以下的简单介绍
图像描述(ImageCaption)任务是多模态领域的一个经典任务。
多模态学习从1970年代起步,经历了几个发展阶段,在2010后全面步入Deep Learning阶段。
人其实是一个多模态学习的总和,所以也有”砖家“说了,多模态学习才是真正的人工智能发展方向。
官网http://cocodataset.org/ 官网http://cocodataset.org/#download 下提供的代码地址: https://github.com/cocodataset/cocoapi 其中带有coco的评估代码,会随着当初安装cocoapi时一同安装。 但此处的cocoeval只用于keypoint与instances,不能用于caption。
官网http://cocodataset.org/#captions-eval 下提供的代码地址:https://github.com/tylin/coco-caption 其中带有coco专用于caption的评估代码
MS COCO数据集目标检测(Detection) MS COCO数据集人体关键点(Keypoint)
eval{
"BLEU_1" : float, # (blue常用来测机翻)
"BLEU_2" : float,
"BLEU_3" : float,
"BLEU_4" : float,
"METEOR" : float,
"ROUGE_L" : float, # (常用来测文摘)
"CIDEr" : float,
}
作者:西柚媛
编辑:西柚媛
推荐阅读:
投稿、交流&合作 欢迎扫码进群
记得备注 “昵称-学校(公司)”呦~
评论