评测指标
1.说话人识别准确率
在说话人识别中,包含说话人辨认(automatic speaker identification, ASI)和说话人验证(automatic speaker verification, ASV)任务。ASI任务可以直接采用测试集上的辨认准确率(Accuracy, ACC)来评估,而ASV任务要通过trails列表计算等错误率(Equal Error Rate, EER)。
1.1 Accuracy
在说话人辨认(speaker identification)任务中,ACC通常是通过正确识别的说话人数量与总测试样本数量的比值来计算。它能直观地反映出系统对不同说话人正确识别的能力,数值越高表明识别的准确性越好。ACC可用于比较不同说话人辨认系统的性能优劣,为选择更高效的系统提供依据。
1.2 Equal Error Rate
在说话人验证(speaker verification)任务中,EER的计算方法如下:随着系统决策阈值的变化,会得到不同的错误接受率(False Accept Rate, FAR)和错误拒绝率(False Reject Rate, FRR),EER是FAR和FRR相等时的错误率。EER可作为衡量说话人确认系统性能的重要指标,值越低表示系统性能越好。