IoMT-SecAlarmBench는 실제 ECG·PPG 신호에 네 가지 공격 유형, 네 단계 심각도, 두 가지 생리학적 타당성 조건, 재생 공격을 결합해 통제된 무결성 공격을 주입한 반합성 벤치마크로, 공격이 없었을 때의 원본 신호까지 함께 제공해 반사실적 정답을 확보했다. 5개 방법군의 탐지기 6종을 임계값 독립적 지표와 동일한 오탐 예산 하에서 평가한 결과, 재생 공격과 저진폭 일시적 스파이크 같은 어려운 사례는 어떤 탐지기도 우연 수준을 크게 넘지 못했다. 최고 성능 탐지기조차 어려운 사례에서 정상 데이터 대비 5.3배 높은 비율로 센서 오류를 공격으로 오탐하는 등, 공격 탐지와 오류 구분 사이의 트레이드오프도 드러났다. 기존에 보고된 IoMT 침입 탐지 성능 일부가 식별 정보 누출에 의한 것이라는 감사 결과도 함께 공개했다.

• •ECG+PPG 실측 신호에 통제된 무결성 공격을 주입하고 원본 신호까지 함께 제공하는 반사실적 벤치마크
• •재생 공격과 저진폭 스파이크는 모든 탐지기에서 우연 수준에 가까운 탐지 성능
• •최고 성능 탐지기도 정상 데이터 대비 5.3배 높은 비율로 센서 오류를 오탐
• •기존 IoMT 침입 탐지 성능 일부가 식별 정보 누출에 기인했음을 감사로 확인