同源图像检索

项目简介

同源图像检索是指在大规模图像数据集合中检索出经过不同图像处理变化后的图像。图像处理方式包括：1）不同文件格式；2）不同压缩比；3）缩放、黑白、噪声、水印、平移、剪切、旋转、模糊、画中画编辑。

评价指标

说明：

1.检索开始时间和检索结束时间：检索开始时间与检索结束时间使用主办方提供的标准脚本程序进行统计，精确到毫秒级别。

2.mAP：对于单个检索任务，计算topN返回结果的recall-precision 曲线面积 (AP)。mAP 计算多次检索任务AP的平均值。

3.平均TopN召回率：对于单个检索任务，TopN召回率为固定返回结果数目的前提下，正确检索结果数目比上测试集中正确结果的数目。平均TopN召回率为多次检索任务召回率的平均值。

4.TopN中N取值为60。

竞赛测试数据集

测试数据采集自互联网场景，总量不少于200万张，其中包含1000张同源图像的检索目标数据。测试数据包括多个主题，并且单张图片具有一定的多样性、复杂性。

变换图像所施加变换的种类和数量具体安排如下表：

任务输入输出格式

1.（输入）待检索数据集图像命名格式：DB_检索集唯一ID.jpg；

2.（输入）检索目标图像命名格式：QUERY_目标集唯一ID.jpg；

3.（输出）检索结果：要求参评单位将检索结果整理为CSV文件。

每一项用制表符'\t'分割，每一行具体格式如下：（所有输出以UTF-8无BOM格式编码）

目标集图像ID\tTop_1检索结果ID\t…\tTop_N检索结果ID