업데이트
벤치마크 사이트의 최근 변경 사항과 예정된 작업입니다.
예정된 작업
반영 중 박스 내부 잔향 저감
현재의 음향 차폐 박스는 외부 소음은 잘 막지만, 좁은 내부에 약간의 잔향이 남아 실제 사용 환경보다 다소 울리는 소리로 마이크에 들어갑니다. 이 잔향을 줄여 엔진이 실제 사용 환경에 더 가까운 소리를 듣도록 개선하는 작업을 진행 중입니다.
최근 변경 사항
반영 완료2026-07-15 음향 차폐 박스 + 실제 기기 테스트 환경
테스트 하네스를 안드로이드 에뮬레이터에서 실제 안드로이드/iOS 기기로 전환했습니다. 기기는 소형 음향 차폐 박스 안에 배치하며, 재생용 스피커도 박스 내부에 함께 두고, 외부 컴퓨터에서 유선으로 기기를 제어해 테스트를 수행합니다. 자세한 환경은 테스트 방식 페이지를 참고하세요. 기존 에뮬레이터 기반 기록은 그대로 보존되지만, 새 환경의 점수만 반영되도록 공개 리더보드에서는 감춰집니다.
반영 완료2026-06-29 SER 및 CER 점수 도입
테스트 상세 페이지에 기존 WER에 더해 의미 오류율(SER)과 글자 오류율(CER)이 함께 표시됩니다. 한국어 클립의 경우 SER과 CER이 어절 단위 WER보다 의미/문자 수준의 정확도를 더 잘 나타내므로, 향후 한국어 리더보드의 주요 지표를 SER + CER로 전환할 예정입니다. 영어 클립은 계속 WER을 사용합니다.