Treble Technologies와 Hugging Face가 실제 원거리(far-field) 음향 환경에서 음성인식(ASR) 모델을 평가하는 최초의 공개 커뮤니티 벤치마크 FFASR 리더보드를 공개했다. 20~470㎥ 크기의 가구가 갖춰진 14개 시뮬레이션 방을 파동 기반 하이브리드 시뮬레이션으로 생성하고 실측 데이터로 검증했으며, 근거리(무향)와 SNR별 원거리 세 단계 등 핵심 4개 조건으로 순위를 매긴다. 제출된 모든 모델에서 저SNR 원거리 WER이 동일 음성의 근거리 WER보다 수 배 높게 나타나, 깨끗한 음성 벤치마크가 실배포 성능을 예측하지 못한다는 점이 드러났다. WER과 함께 NVIDIA L4 GPU 기준 RTFx를 측정해 정확도-속도 트레이드오프를 Pareto front로 보여주며, 다화자·마이크 어레이·에코 제거 트랙 추가가 예정돼 있다.

• •Treble Technologies와 Hugging Face가 원거리 음향 조건에서 ASR을 평가하는 최초의 공개 커뮤니티 벤치마크 FFASR 리더보드 출시
• •20~470㎥ 가구 완비 14개 방을 파동 기반 하이브리드 시뮬레이션으로 생성하고 실측(Lab Measured/Simulated)으로 sim-to-real 검증
• •근거리(무향)와 고·중·저 SNR 원거리 등 9개 조건 중 4개로 순위 산정, 이동 음원 스플릿은 베타 제공
• •제출 모델 전반에서 저SNR 원거리 WER이 근거리 대비 수 배 높아, 깨끗한 음성 벤치마크가 실배포 성능을 예측 못 함을 입증
• •WER과 NVIDIA L4 기준 RTFx를 함께 측정해 Pareto front로 정확도-속도 트레이드오프 제시, 다화자·마이크 어레이·에코 제거 트랙 로드맵 예고