TII, Falcon ASR 발표… 아랍어·에미라티 음성 인식 결과와 평가 범위

ARCH-B

ARCH-B

Hugging Face 기반 · 2026년 10월 12일 · 5분 분량

0

한눈에 보는 핵심요약

아부다비 TII가 16억 매개변수의 Falcon ASR을 소개했다. 아랍어 여섯 시험의 평균 단어 오류율 20.92%와 별도 에미라티 내부 평가를 제시하며 다섯 언어 전사를 지원한다고 밝혔다. 공개 데이터와 내부 시험, 데모 제공과 계획 중인 API를 구분해 읽는다.

  • 아랍어 WER 20.92%는 여섯 시험을 같은 비중으로 계산한 개발팀 결과다.
  • 9월 30일 순위표와 비교한 2.25%포인트 차이를 모든 환경의 우위로 확대하지 않는다.
  • 데모는 안내됐지만 API와 네이티브 앱은 계획 단계로 발표됐다.
TII, Falcon ASR 발표… 아랍어·에미라티 음성 인식 결과와 평가 범위
이미지 제공: Hugging Face · 원출처 기사

아랍어 방언에 초점을 둔 전사 모델

아부다비 Technology Innovation Institute(TII)는 2026년 10월 7일 Falcon ASR을 소개했다. 매개변수는 16억 개이며 아랍어, 특히 에미라티 방언의 음성 인식에 초점을 맞췄다고 설명한다. 영어와 프랑스어, 스페인어, 포르투갈어도 지원하며 다섯 언어가 같은 모델 가중치를 사용한다. 출력은 들은 언어의 전사문이고 단어별 시간 표시도 제공한다고 밝혔다. 자동으로 다른 언어로 번역하는 제품이나 음성 합성 모델의 발표와는 용도가 다르다. TII는 표준 아랍어와 지역 방언, 영어를 학습에 포함했으며 잡음과 겹치는 발화, 전화 음질 같은 녹음 조건도 다뤘다고 설명한다. 이런 학습 구성이 모든 실제 녹음에서 동일한 정확도를 보장하는 것은 아니므로 발표한 시험 조건을 함께 살필 필요가 있다.

공개 시험과 내부 시험의 수치

TII가 제시한 아랍어 평균 단어 오류율(WER)은 여섯 시험 세트를 같은 비중으로 계산한 20.92%다. 비교 대상으로 사용한 것은 9월 30일 확인한 공개 순위표의 결과이며 그중 가장 낮은 23.17%보다 2.25%포인트 낮다고 설명했다. 이는 개발팀의 동일 프로토콜 평가와 당시 공개 결과의 비교다. 특정 날짜의 비교를 이후 모든 모델을 포함한 영구적인 최고 기록으로 표현할 수는 없다. 별도의 에미라티 내부 시험에서는 WER 22.73%, 문자 오류율 10.19%를 보고했다. 공개 시험과 다른 보관 녹음 및 사람이 검증한 전사문을 사용한 평가다. 영어 결과 5.74%도 일곱 공개 시험의 평균으로 제시됐다. 오류율의 분모와 언어, 데이터가 서로 다르므로 세 수치를 한 정확도 순위로 합칠 이유는 없다.

방언 데이터와 제공 상태

발표에서 언급한 Casablanca의 연구팀 카드는 에미라티를 포함해 여덟 아랍어 방언을 다루며 전사와 방언, 언어 전환 등의 주석을 제공한다고 설명한다. 공개된 버전은 검증·시험 세트라는 범위도 표시한다. 따라서 에미라티 시험이 전혀 없는 상태에서 모델이 처음 평가됐다는 해석은 맞지 않는다. TII는 공개 데이터의 UAE 부분을 별도 내부 시험으로 보완했다고 밝혔다. 기반 연구로 연결한 Falcon3 Audio 논문은 음성·언어 모델의 구조와 학습을 다루지만 이번 Falcon ASR의 모든 수치를 직접 입증하는 동일한 평가 보고서는 아니다. 이용 상태도 구분된다. 공식 발표는 Hugging Face 데모로 녹음을 시험할 수 있다고 안내하고 API와 네이티브 앱은 계획 중이라고 적었다. 상용 API가 이미 전면 제공된다고 단정할 수 없다.

ARCH.B 분석

평균 뒤에 숨지 않아야 할 차이

ARCH.B는 방언을 모델 선택의 주변 조건으로 두지 않는 접근에 의미를 둔다. 같은 아랍어라도 실제 말투와 녹음 환경이 달라지면 전사의 어려움이 달라진다. 여섯 세트의 평균은 비교 기준을 제공하지만 개별 집단과 작업에 필요한 결과를 대신하지 않는다. 한 세트의 문장이 길거나 짧은지와 언어가 전환되는 구간이 많은지도 해석에 영향을 준다. 개발자가 회의 기록이나 전화 상담 같은 용도를 검토한다면 자신의 자료를 대표하는 표본으로 오류의 유형을 살피는 과정이 필요하다. 단어 누락과 이름의 잘못된 표기는 같은 한 단어의 오류여도 업무에서 다른 결과를 낳을 수 있기 때문이다. 낮은 평균을 단독으로 홍보하기보다 어떤 발화에 남은 문제가 있는지 설명하는 기록이 모델의 실제 적합성을 판단하는 데 더 직접적이다.

ARCH.B 분석

전사 결과를 다음 작업으로 옮길 때

단어별 시간 표시는 전사문과 원래 녹음의 위치를 연결할 여지를 준다. 이용자는 잘못 옮겨진 구간을 다시 듣거나 긴 기록에서 필요한 부분을 찾을 때 이 연결을 활용할 수 있다. 다만 표시 기능의 존재와 시간 정렬의 정확도는 따로 확인할 항목이다. 공개 데모를 경험하는 것과 반복적인 업무에 붙일 API의 처리 조건을 아는 것도 다른 단계다. 이번 발표는 후자를 계획 상태로 남겨 놓았으므로 비용과 요청 제한, 제공 지역을 임의로 채울 수 없다. 음성 인식 모델을 평가하는 아카이브에는 시험 결과뿐 아니라 당시 제공 형태를 함께 남기는 편이 유용하다. 그러면 이후 API가 실제 공개됐을 때 모델 발표와 서비스 이용 시작을 구분할 수 있고, 동일한 이름의 제품에 생긴 기능 변화를 비교하기도 쉬워진다.

출처

Hugging Face의 원출처와 본문에 표시한 참고자료를 바탕으로 한국어로 재구성했습니다. ‘ARCH.B 분석’은 자료를 읽고 덧붙인 편집 해석입니다.

Introducing Falcon ASR (새 창)

Share

Related

함께 읽기 좋은 글