A Problem-Oriented Taxonomy of Evaluation Metrics for Time Series Anomaly Detection
AI总结 时间序列异常检测在物联网和物理信息系统中应用广泛,但其评估因应用场景多样和指标假设不同而面临挑战。本文提出了一种面向问题的评估指标分类框架,从解决的具体评估问题出发重新诠释现有指标,将其分为六个维度,涵盖准确性、及时性、标签容忍度、人工审核成本惩罚、抗随机性以及跨数据集可比性等方面。通过实验分析不同场景下指标的行为,量化其区分真实检测与随机噪声的能力,揭示了多数事件级指标具有较强区分力,而部分常用指标对随机分数膨胀较为敏感,强调了评估指标应根据具体任务需求进行选择。