单模态和跨模态检索任务
依存关系
我们建议对以下软件包使用Anaconda：Python 2.7， （> 0.1.12）， （> 1.12.1），
朋克句子分词器：
import nltk
nltk . download ()
> d punkt
下载资料
在此示例中，我们使用MSCOCO图像标题作为数据集，对于单个模型（图像或文本），您只能使用图像/文本作为训练数据，皮质模态检索与单个模态检索共享相同的框架。 您可以从MSCOCO图像字幕网站下载数据，或从和下载预先计算的图像功能。 要使用完整的图像编码器，请在，和从其原始来源下载图像。
wget http://www.cs.toronto.edu/~faghri/vsepp/vocab.tar
wget http://www.cs.toronto.edu/~faghri/vsepp/data.tar
wget http:/
2022-02-26 17:17:35
1.28MB
1
它是从两个对齐的摄像头（一个可见，一个远红外）收集的。总共有412人。每个人有10个可见光图像和10个远红外图像。
2021-12-04 17:28:38
66.56MB
1
随着互联网上多媒体数据的爆炸式增长,单一模态的检索已经无法满足用户需求,跨模态检索应运而生。跨模态检索旨在以一种模态的数据去检索另一种模态的相关数据,其核心任务是数据特征提取和不同模态间数据的相关性度量。
2021-08-15 01:59:07
3.62MB
1
跨模态学习 NLPCC2020 讲习班内容 清华大学 Cui Peng，Zhang Ziwei 分享，相关ppt
2021-05-07 11:01:42
10MB
1
近年来，由于多模态数据的快速增长，跨模态检索受到了研究者的广泛关注，它将一种模态的数据作为查询去检索其它模态的数据。
2021-03-25 19:13:53
2.18MB
1
跨模态行人重识别数据集
Nguyen Dat Tien, Hong Hyung Gil, Kim Ki Wan, et al. Person Recognition System Based on a Combination of Body Images from Visible Light and Thermal Cameras.. 2017, 17(3)
2021-03-19 16:17:36
111.33MB
1