MADQI：面向AIS船舶异常检测的无监督学习新评估指标
海事自动识别系统（AIS）数据中的异常检测对于保障航行安全、防范非法捕捞和打击走私至关重要。然而，当前广泛使用的无监督学习算法（如孤立森林）虽能识别异常，却缺乏系统、有意义的评估手段——因为无标签数据下，传统的精确率、召回率等指标无法直接适用。针对这一痛点，来自多所高校的研究团队在arXiv预印本中提出了一项名为 MADQI（Maritime Anomaly Detection Quality Index） 的新型复合评价指标，为无监督海事异常检测提供了可靠的量化评估框架。
什么是MADQI？
MADQI并非单一数值，而是一个由四个子指标有机组合而成的综合指数：
- 异常率一致性：衡量模型在不同数据块上检测出的异常比例是否稳定。高一致性意味着模型鲁棒，不会因数据切分方式不同而产生剧烈波动。
- 物理合理性得分：评估检测出的异常是否符合航海物理规律。例如，一艘船突然出现超高速或位置跳跃，若被标记为异常，其物理合理性得分会较高。
- 分数分布分离度：量化模型对正常与异常样本的区分能力。理想情况下，正常样本的异常分数应集中在低值区，异常样本则集中在高值区，两者分布重叠越少越好。
- 极端案例证据：专门检验模型对极端异常（如大幅度转向、长时间信号丢失）的捕捉能力。
这四个子指标通过自动归一化、多块评估和自适应缩放技术融合成最终的MADQI分数，分数范围0-100%，越高代表检测质量越好。
实验验证：80.37%的优异表现
研究团队在真实AIS数据集上进行了测试，使用孤立森林作为基础检测器。结果显示，所提框架的MADQI综合得分达到 80.37%，证明其在无标签场景下能够有效评估检测质量。特别值得注意的是，ECE（极端案例证据）和ARC（异常率一致性）分别取得了0.907和1.000的出色成绩，表明模型在捕捉极端异常和保持检测稳定性方面表现尤为突出。
为何重要？
海事异常检测长期面临“无标签困境”——标注AIS数据需要大量专家人工审核，成本高昂且难以规模化。MADQI的出现，使得研究人员和工程团队可以在没有真实标签的情况下，对无监督模型的性能进行定量比较和迭代优化。这不仅能加速算法选型，也为后续部署到实际监控系统提供了可信的评估依据。
此外，MADQI框架的设计思路具有通用性。虽然本研究聚焦于AIS数据，但其核心思想——结合物理约束、分布特性和极端案例来构建无监督评估指标——可推广至其他时空异常检测任务，如交通流量监控、金融交易异常识别等。
局限与展望
目前MADQI的验证仅基于单一数据集和孤立森林算法，其泛化能力尚需在更多数据集和不同算法（如自编码器、GAN）上进一步检验。此外，四个子指标的权重分配是否最优，以及如何与半监督或主动学习结合，也是未来值得探索的方向。
总体而言，MADQI为无监督海事异常检测领域提供了一把“量尺”，填补了评估方法上的空白。随着该指标的进一步成熟和标准化，有望成为该领域的基准评价工具。