下血本!Facebook AI 20万美金举办“图像匹配”大赛

近日,Facebook AI 在NeurIPS’21 举办了图像相似检索大赛( Image Similarity Challenge ,ISC2021),放出百万量级的数据集,提供20万美金的奖励。

相似图像的定义很宽泛,这项比赛更加关注的对原图进行编辑后的图像的检索,如下图:

在原有参考图上进行一定的像素级改变,该比赛中认为前后两图是“相似的”。

下图对图像相似进行了概念可视化,该比赛关注的是:纯粹副本、近纯粹副本和编辑拷贝三种类型,而相似的实例和相似类别不再此列。

这也是比赛的难点。有可能有很相似的图像,但不是来自同一参考图的编辑,不能归为相似图像。

这种图像相似检索任务在互联网版权保护方面具有重要意义。

下图展示了不同相似类别图像的检索流程:

可见,该赛事关注的是来自同一份拷贝的图像编辑后的相似比较。

其实这种视觉任务早已有之,传统图像特征如GIST,即被设计用来图像匹配。

在论文 The 2021 Image Similarity Dataset and Challenge 中,作者详细列出了此次大赛推出的数据集DISC21与其他数据集的比较:

可见,查询数据集规模达到2万、干扰集规模8万和数据集总大小达到百万,数据集总存储量大约360G,又是一个数据量极大的视觉比赛。

以下为官方给出的互联网上常见的编辑类型:

官方给出的baseline的结果:

相关论文:

https://arxiv.org/pdf/2106.09672.pdf

比赛地址:

https://www.drivendata.org/competitions/79/competition-image-similarity-1-dev/

baseline:

https://github.com/facebookresearch/isc2021

这个任务看起来不难(毕竟相关开源代码比较多),但能挖掘其中细节,取得好的结果,估计也需要下很大功夫。

END

注明:竞赛

竞赛交流群

扫码备注拉你入群。

(0)

相关推荐