评测指标

1. 精度(Precision@X or Accuracy@X)

refcoco, refcoco+, refcocog 这三个基准评测数据集的基本评价指标都是 Precision@X or Accuracy@X(即: Prec@X 或 Acc@X)。

Prec@X 是指：当指代表达任务进行推断(即: 给定一张查询图像和一个查询句子)时，在所有评估实例中，模型预测的区域包围框与实际(GT)包围框的交并比(IOU)大于给定阈值X(默认值: X=0.5)的平均比例。

比如: 若数据集分割有 1000 个 指代表达查询，某个指代表达模型在这 1000 次查询中， IOU > 0.5 共出现了 900 次，那么 Prec@X 精度就是 900/1000 == 90% 或者 0.9 。