Fireflies vs Otter: 한국어 회의라면 정확도 순위가 뒤집힌다

한국어 회의 녹취 도구를 고른다면 Fireflies가 우선 검토 대상이다. Fireflies의 지원 언어 안내에는 한국어와 한국어(대한민국)가 전사 언어로 올라 있다. 반면 Otter의 전사 언어 목록에는 영어·스페인어·프랑스어·독일어·일본어·중국어 간체만 있다. 한국어가 회의의 주 언어라면 지원 여부에서 선택의 순서가 바뀐다.

영어 음성의 측정 결과는 다른 질문에 답한다. Nesyona의 회의 도구 비교는 미국 영어로 진행한 회의에서 도구별 발화 200개를 대조해 Otter의 단어 정확도를 96%, Fireflies를 94%로 제시했다. 같은 비교에서는 소음, 억양, 여러 사람의 발언이 섞인 조건에 따라 차이가 커졌지만 한국어 정확도는 측정하지 않았다. 한국어 회의에 필요한 판단은 이 영어 점수를 그대로 적용하는 것이 아니라, 전사가 가능한 도구의 결과를 실제 회의 조건에서 살피는 것이다.

한국어 전사가 첫 관문인 이유

지원 언어는 회의록의 출발점이다. Otter에서 채팅 기능으로 다른 언어의 답변이나 번역을 받을 수 있더라도, 그 기능은 한국어 음성을 한국어 원문으로 전사하는 기능과 다르다. 발언을 남기는 일, 남긴 내용을 번역하는 일, 회의록에 질문하는 일은 업무상 이어질 수 있지만 구매 조건에서는 분리해야 한다. 한국어 발언의 원문이 필요한 팀이라면 후속 기능을 비교하기 전에 이 조건부터 충족시켜야 한다.

Fireflies는 한국어를 뜻하는 ko와 한국어(대한민국)를 뜻하는 ko-KR을 구분해 표시한다. 한 언어가 중심인 회의에는 기본 전사 언어를 지정하거나 주된 언어의 자동 감지를 사용할 수 있고, 개별 회의의 언어를 바꾸는 방식도 제공한다. 한국어와 영어가 오가는 회의에는 여러 언어를 감지하는 기능이 따로 있으며, 이 다국어 자동 감지는 베타로 표시돼 있다. 따라서 주로 한국어로 진행하는 회의와 언어가 자주 바뀌는 회의는 같은 조건으로 묶어 평가하기 어렵다.

지원 목록에 있다는 사실은 도입 자격을 뜻할 뿐, 결과물의 품질 보증은 아니다. 사람 이름, 제품명, 영어 약어가 섞인 한국어 발언에서 원문이 잘못 기록되면 뒤에 붙는 요약도 담당자나 결정 사항을 흐릴 수 있다. 특히 검색 가능한 회의록을 쌓으려는 팀에는 매끄러운 요약보다 고유명사와 발언 맥락이 원문에 남는지가 중요하다. 이 차이 때문에 영어에서 높은 점수를 받은 도구가 한국어 회의의 우선 후보가 되지는 않는다.

영어 정확도와 한국어 적합성은 다른 순위다

외부 비교의 단어 정확도는 들린 말을 얼마나 맞혔는지 보여주지만, 측정에 쓴 언어와 음성 조건까지 함께 읽어야 의미가 있다. 또렷한 미국 영어 회의에서 앞선 결과를 한국어 회의의 오류율로 환산할 근거는 없다. 한국어에는 조사와 어미가 붙고, 회의에서는 약칭이나 영문 제품명이 문장 사이에 들어간다. 이런 발화에서 어느 서비스가 얼마나 정확한지는 앞의 영어 비교만으로 알 수 없다.

한국어 전사가 필수 조건이라면 Otter의 영어 점수는 구매 후보를 정하는 첫 기준이 될 수 없다. Fireflies는 전사 언어 조건을 통과하므로 실제 회의록의 품질을 평가할 후보로 남는다. 이는 Fireflies의 한국어 단어 정확도가 Otter보다 높다는 실험 결과와는 구별해야 한다. 선택의 순서를 바꾸는 원인은 측정되지 않은 한국어 점수 차이가 아니라, 한국어 음성을 전사할 수 있다고 명시한 제품과 그렇지 않은 제품의 차이다.

영어 회의가 업무의 큰 부분을 차지한다면 판단은 달라진다. 그런 팀에는 Otter의 영어 측정 결과가 참고값이 될 수 있으며, 회의 중 기록을 확인하는 흐름도 고려할 만하다. 다만 영어 회의 안에서도 잡음, 억양, 동시 발언에 따라 수정량이 달라질 수 있다. 한 조직에서 한국어 회의와 영어 회의의 비중이 모두 크다면 두 언어를 합쳐 하나의 정확도 점수를 매기는 것보다, 각 언어에서 필요한 결과물을 따로 놓고 비교하는 편이 명확하다.

화자 구분은 단어 오류와 따로 본다

회의록에서는 문장을 맞게 받아쓰고도 발언자를 잘못 붙일 수 있다. 예를 들어 결정에 동의한 사람과 실행을 맡겠다고 한 사람이 바뀌어 기록되면, 문장 자체가 자연스러워도 후속 업무에는 쓸 수 없다. 참석자가 번갈아 길게 말하는 회의와 짧게 끼어들며 의견을 보태는 회의에서 화자 구분의 난도도 다르다. 전사 정확도와 화자 배정 정확도를 한 항목으로 묶으면 이런 수정 부담이 보이지 않는다.

실사용 관찰에서도 그 차이가 드러난다. TechRadar의 Fireflies 사용 평가는 화자 식별과 회의 내용의 구조화를 장점으로 보면서도, 겹말이나 낮은 음질이 있는 통화에서는 요약을 수정해야 할 수 있다고 적었다. 이 평가는 한국어 회의를 대상으로 한 정량 비교가 아니다. 따라서 화자 식별을 유망한 기능으로 보되, 한국어 다자 회의에서의 수정량을 이미 검증된 수치처럼 취급해서는 안 된다.

수정 부담을 비교할 때는 원문과 요약을 나누는 편이 유용하다. 전사문에서는 고유명사와 숫자, 발언자 표시가 틀린 곳을 확인하고, 요약에서는 결정 사항과 담당자, 후속 기한이 정확히 이어졌는지 본다. 짧고 또렷한 대화만 쓰면 실제 업무에서 오래 걸리는 겹말 구간이 빠진다. 반대로 가장 시끄러운 회의만 고르면 평소 사용 경험을 대표하지 못한다. 조직이 자주 겪는 회의 조건을 포함해야 사람의 검토 시간이 얼마나 드는지 판단할 수 있다.

연동과 녹음 고지도 도입 비용이다

화상회의에 접속할 수 있다는 표시만으로 연동 검토가 끝나지는 않는다. 팀이 쓰는 플랫폼에서 기록 도구가 어떤 일정에 참가하는지, 회의가 끝난 뒤 전사문과 요약이 누구에게 전달되는지, 고객 관리 도구나 업무 기록으로 옮길 때 손이 얼마나 가는지가 다르다. 영어 중심의 Zoom 회의에 주로 쓰는 팀과 한국어 회의 뒤 고객 기록을 남겨야 하는 팀은 같은 기능 목록을 보고도 다른 선택을 할 수 있다. 연동의 가치는 연결 가능한 서비스의 총수보다 실제로 생략되는 작업에서 드러난다.

자동 참가와 결과 공유도 구별해야 한다. 일정에 등록된 회의마다 녹음 도구가 들어오도록 설정했는지, 외부 참석자가 있는 회의는 별도로 다루는지, 회의가 끝난 뒤 녹음과 요약에 접근할 수 있는 사람이 누구인지가 각각 운영 조건이다. 기록이 필요한 회의를 놓치면 전사 품질을 평가할 기회조차 없고, 불필요한 회의를 자동으로 기록하면 정리와 접근 관리에 일이 늘어난다. 따라서 연동을 비교할 때는 회의 전 참가 조건과 회의 후 공유 경로를 함께 봐야 한다.

Fireflies의 팀 관리자 설정 안내에는 일정 기반 자동 녹음, 보관 기간에 따른 자동 삭제, 회의 접근 범위, 회의 한 시간 전 이메일과 회의 중 채팅으로 참석자에게 녹음을 알리는 옵션이 있다. 옵션이 있다는 사실과 조직에 맞게 설정됐다는 사실은 별개다. 참석자에게 알리는 방식, 녹음 대상 회의, 결과를 볼 사람을 함께 정해야 회의록이 업무 흐름에 맞게 남는다.

도입 판단표에서 분리할 항목

두 서비스를 한 줄의 종합 점수로 압축하면 한국어 지원 여부와 영어 측정치가 섞인다. 구매 검토에서는 아래 항목을 각각 기록하는 편이 낫다. 같은 회의 음성을 평가하더라도 언어, 발언 환경, 기록을 넘기는 경로에 따라 실제로 줄어드는 일과 새로 생기는 수정 작업이 다르기 때문이다.

• 한국어 전사: 한국어 원문이 필요한 회의에서는 Fireflies를 먼저 검토한다. Otter는 공식 전사 언어에 한국어가 없으므로, 영어 성적을 근거로 한국어 회의록 제작이 가능하다고 판단하지 않는다. 한국어와 영어를 오가는 회의라면 Fireflies의 일반 자동 감지와 베타 다국어 감지를 구분한다.
• 영어 측정치: 미국 영어의 단어 정확도는 영어 회의에 관한 참고값으로 둔다. 실제 회의의 억양, 음질, 참석자 수가 비교에 쓰인 음성과 얼마나 비슷한지 살펴야 한다. 영어 수치와 한국어 지원 여부를 합산해 하나의 정확도 순위를 만들지 않는다.
• 화자와 요약: 발언이 겹치는 구간의 화자 오배정, 고유명사 오류, 결정 사항과 담당자 수정 시간을 나눠 적는다. 읽기 좋은 요약이라도 누가 무엇을 맡았는지가 틀리면 다시 확인해야 한다. 이 수정 시간이 구독료와 별도로 계속 들어가는 운영 비용이다.
• 회의 연동: 실제 사용하는 화상회의 플랫폼에서 자동 참가가 원하는 일정에만 적용되는지 확인한다. 이후 요약이 팀의 업무 기록이나 고객 관리 흐름으로 이동하는 과정도 본다. 연결 표시가 있어도 전송 권한이나 기록 형식 때문에 수작업이 남을 수 있다.
• 녹음과 접근: 참석자에게 녹음을 알리는 시점과 방식, 녹음 대상, 결과 접근 범위와 보관 방침을 정한다. 외부 고객 회의와 내부 정기 회의에 같은 자동 녹음 규칙을 적용할 필요가 있는지도 판단한다. 이 설정은 전사 정확도와 별개로 도입 과정에 영향을 준다.

한국어가 주 언어인 팀에는 Fireflies가 합리적인 첫 후보다. 이후의 결정은 전사문에서 발언자와 고유명사가 얼마나 정확히 남는지, 요약을 업무에 쓰기까지 얼마나 고쳐야 하는지에 달려 있다. 영어 회의가 중심인 팀이라면 Otter의 영어 측정 결과와 회의 흐름을 별도로 평가할 이유가 있다. 어느 쪽이든 언어 지원을 먼저 가른 뒤 실제 수정 시간과 기록 경로를 비교해야 업무에 맞는 선택이 된다.

함께 읽기:

• MAI-Transcribe-2는 시간당 0.10달러…한국어 성능은 따로 봐야 한다
• VibeVoice가 한국어 회의를 실시간으로 나눈다…가중치도 공개됐다
• Google Workspace와 Microsoft 365, 한국 요금보다 습관이 승부를 가른다