핵심 요약
모르는 언어로 된 음성 메모를 이해하려면 두 가지 별도의 작업이 필요하다. 먼저 오디오를 실제로 말한 언어 그대로 텍스트로 바꾸고, 그다음 그 텍스트를 번역하는 것이다. 번역 앱은 입력을 타이핑으로 받기 때문에 첫 번째 작업이 끝나기 전에는 아무것도 할 수 없다. 품질이 결정되는 지점은 바로 이 받아쓰기(전사) 단계이며, 여기서 생긴 오류는 그대로 번역되어 더 이상 오류처럼 보이지 않게 된다. 이 두 단계를 직접 처리하면 그 누구에게도 메시지를 들려줄 필요가 없다.
친척, 거래처, 집주인에게서 음성 메모가 도착한다. 몇 단어는 알아듣지만, 중요한 내용이라는 것만 짐작할 뿐 무슨 말인지는 알 수 없다. 가장 먼저 떠오르는 방법은 휴대폰에 이미 있는 번역 앱을 여는 것인데, 이 방법은 통하지 않는다. 그 앱은 사용자가 텍스트를 입력하기를 기다리고 있고, 들리지 않는 말을 타이핑할 수는 없기 때문이다.
두 번째로 떠오르는 방법은 그 언어를 아는 사람에게 전달하는 것이다. 이 방법은 효과가 있지만, 원치 않는 대가를 치러야 할 수도 있다. 이 글에서는 이 두 가지 방법을 쓰지 않고도 음성 메시지를 이해하는 방법, 기계가 정확히 처리하는 부분, 그리고 한 번도 읽어본 적 없는 언어에서도 알아챌 수 있는 구체적인 오류 지점을 다룬다.
이미 있는 번역 앱이 시작조차 못 하는 이유
말을 번역하는 일은 하나의 이름으로 불리는 두 가지 작업이다. 첫 번째는 전사(轉寫), 즉 화자가 사용한 언어 그대로 소리를 문자로 바꾸는 작업이다. 두 번째는 번역, 즉 그 문자를 사용자가 읽을 수 있는 언어로 바꾸는 작업이다. 이 둘은 서로 다른 장치이며 실패하는 방식도 다르고, 사람들이 흔히 쓰는 도구는 대부분 두 번째 작업만 한다.
휴대폰에 있는 앱이 아무 소용 없이 그대로 있는 이유가 바로 여기에 있다. 그 앱은 텍스트 입력창을 중심으로 만들어졌다. 텍스트가 들어가고 텍스트가 나온다. 음성 파일을 건네주면 처리할 재료가 없는 셈이다. 일부 도구는 마이크로 음성을 입력받기도 하는데, 이는 본인이 직접 말하면서 여러 번 다시 말할 수 있을 때는 도움이 되지만, 통화 품질이 나쁜 상태에서 다른 사람이 빠르게 말한 녹음에는 별 도움이 되지 않는다.
작업 순서를 이해하면 문제의 모양이 달라진다. 필요한 것은 번역기가 아니다. 필요한 것은 메시지의 원어 그대로 문자로 바꿔주는 도구이고, 그렇게 하고 나면 원래 쓰던 번역 습관이 그대로 통한다. 텍스트용으로 이미 쓰던 도구는 뒤쪽 절반에는 그대로 써도 된다. 앞쪽 절반이 해결해야 할 부분이다.
이는 사람들이 이상하게 여기는 현상도 설명해준다. 왜 메시지가 유창하고 자신감 있어 보이지만 완전히 틀린 한국어로 번역되어 돌아오는가 하는 것이다. 번역 절반은 제 역할을 다했다. 다만 나쁜 입력을 건네받아 그것을 아름답게 표현했을 뿐이다.
누군가에게 들려달라고 부탁하는 대가
이중언어를 쓰는 친구, 사촌, 마침 그 언어를 아는 동료에게 메시지를 전달하는 방법은 빠르고 대체로 정확하다. 하지만 그 사람에게 사적인 대화 내용을 목소리의 어조까지 포함해서 전부 넘겨준다는 뜻이기도 하다.
배송 날짜에 관한 메시지라면 아무도 신경 쓰지 않는다. 하지만 돈, 건강, 가족에 관한 메시지라면 셈법이 달라진다. 친척이 보낸 검사 결과에 관한 음성 메모를 동료에게 들려주고 싶은 사람은 없다. 집주인이 보낸 연체 관련 메시지를, 스스로 어떻게 생각할지 정하기도 전에 친구에게 설명하고 싶은 사람도 없다. 거래처가 보낸, 자신이 잘못 처리했을지도 모르는 결제 관련 메시지도 마찬가지다.
그 결과 메시지는 열어보지 않은 채로 남는다. 중요하지 않아서가 아니라, 그것을 처리하려면 누군가를 끌어들여야 하고, 누군가를 끌어들이는 데는 메시지 내용을 알기도 전에 이미 치러야 하는 사회적 대가가 있기 때문이다. 사람들이 며칠씩 음성 메모를 방치하는 이유는 정확히 이것이다. 읽지 못하는 메시지가 바로 소리 내어 읽히기를 가장 원치 않는 메시지다.
이것은 이 두 단계를 스스로 처리해야 할 실질적인 이유이며, 사생활 보호를 부수적인 장점 정도로 취급하지 말고 분명히 말할 가치가 있다. 요점은 기계 전사가 사촌보다 낫다는 것이 아니다. 사촌이 더 나을 가능성이 크다. 요점은 먼저 혼자서 그 내용을 읽어보고, 다른 누군가가 알아야 할지 여부를 나중에 스스로 결정할 수 있다는 것이다.
첫 단계가 두 번째 단계의 품질을 결정한다
결과물이 얼마나 쓸모 있는지는 전부 원어로 된 전사문에 달려 있다. 이것만 제대로 되면 번역은 평범한 작업이 된다. 이것이 틀리면 오류가 그대로 이어진다.
위험한 이유는 여기에 있다. 원어 전사문에 오류가 있고, 그 원어를 읽을 수 없다면, 그 오류를 절대 알아볼 수 없다. 오류는 번역 단계로 넘어가 사용자가 읽을 수 있는 언어로 정확하게 표현되어, 평범한 문장처럼 도착한다. 어색한 흔적은 없다. 아무것도 표시해주지 않는다. 번역을 거쳐 살아남은 틀린 단어는 맞는 단어와 똑같아 보인다.
이것을 아는 언어로 된 전사문과 비교해보면, 오류는 스스로 신호를 보낸다. 문장을 읽다가 말이 안 되면 오디오를 다시 재생해본다. 그런 수정 루프는 여기서는 쓸 수 없다. 사용자는 검증할 수 없는 과정의 결과물을 읽고 있는 셈이다.
실질적인 결론은, 의심해야 할 대상은 번역문이 아니라 전사문이라는 것이다. 사용자 언어로 뭔가 이상하게 읽힌다면, 그 원인이 번역 절반에 있는 경우는 거의 없다. 거의 언제나 전사 단계에서 잘못 들은 단어이며, 해결책은 그 지점의 원어 텍스트를 보고, 이해하지 못하더라도 그 순간의 오디오를 다시 들어보는 것이다. 전사문에는 긴 단어가 적혀 있는데 화자가 짧은 단어를 말했다는 것을 듣는 것만으로도 뭔가를 알 수 있다.
언어를 자동으로 판별하게 하고, 그 판별 결과를 확인하라
실질적인 걸림돌이 바로 나타난다. 일부 도구는 아무것도 하기 전에 목록에서 원어를 직접 고르라고 요구한다. 그 언어를 확신 있게 식별할 수 없다면, 그리고 사람들은 흔히 밀접하게 관련된 언어를 귀로 구별하지 못하는데, 결과 전체를 결정하는 설정을 그냥 추측하고 있는 셈이다.
오디오 자체에서 언어를 감지하면 이 단계가 사라진다. WhatsApp 웹용 SozAI 확장 프로그램은 사용자에게 언어를 고르라고 요구하는 대신 녹음에서 언어를 직접 판별하고, 어떤 언어로 판별했는지 결과에 배지로 표시해준다. 이 배지가 유용한 부분인데, 잘못된 추측을 바로 잡아낼 수 있게 해주기 때문이다. 발신자가 쓰지 않는 언어로 표시되어 있다면, 그 밑에 나온 전사문은 두 문단을 헷갈리며 읽고 나서가 아니라 한눈에 읽을 가치가 없다는 것을 알 수 있다.
한 가지 예상해야 할 점이 있다. 요약문은 메시지가 실제로 말해진 언어 그대로 돌아온다. 이것이 첫 단계의 올바른 동작이며, 읽을 수 없던 메시지는 여전히 읽을 수 없는 메시지라는 뜻이다. 오디오 문제를 텍스트 문제로 바꾼 것이며, 그것이 핵심이지만, 번역 단계는 여전히 사용자가 직접 해야 할 몫으로 남는다.
틀릴 가능성이 가장 큰 부분이 가장 중요한 부분이다
자동 전사는 평범하게 이어지는 말에는 강하고, 정확히 세 가지, 즉 사람 이름, 지명, 숫자에는 약하다. 흔한 단어는 주변 단어로 예측할 수 있다. 성(姓)은 예측할 수 없다. 거리 이름도 예측할 수 없다. 숫자도 예측할 수 없다.
이제 음성 메모가 보통 무엇에 관한 것인지 생각해보자. 어디서 만날지, 얼마를 빚졌는지, 며칠인지, 누가 누구에게 뭐라고 했는지. 실제로 필요했던 정보는 전사문에서 틀릴 가능성이 가장 큰 부분에 몰려 있고, 주소나 금액에 관한 메시지에서 그 부분은 세부 사항이 아니라 메시지 자체다.
그러니 전사문은 두 번 읽어야 한다. 첫 번째 읽기에서는 메시지의 큰 그림, 즉 누가 말하고 있는지, 무엇에 관한 것인지, 오늘 답장이 필요한지를 파악한다. 이 부분은 믿어도 된다. 두 번째 읽기는 구체적인 내용을 위한 것이고, 여기서는 믿기보다 확인해야 한다.
- 숫자 주변 몇 초의 오디오를 재생해서 숫자를 들어보라. 모르는 언어라도 숫자는 알아들을 수 있는 경우가 많다.
- 이름은 전사문이 아니라 자신의 연락처나 이전 메시지와 대조해서 확인하라.
- 주소는 해당 인물이나 업체에 대해 이미 갖고 있는 기록과 비교하라.
- 금액이 다음 행동을 결정한다면, 행동에 나서기 전에 문자로 다시 확인받으라.
문자로 숫자를 다시 확인해달라고 요청하는 것은 이해하지 못했다는 것을 인정하는 것이 아니다. 자신의 언어로 통화 품질이 나쁜 전화로 숫자를 들었을 때도 똑같이 할 일이다.
이 방법으로 할 수 없는 것
한 번의 과정으로 메시지를 곧바로 자신의 언어로 바꿔주지는 않는다. 두 단계라는 것은 두 단계가 필요하다는 뜻이고, 전사문은 말해진 그 언어로 나온다. 번역 절반을 따로 거치지 않고 완성된 결과를 자신의 언어로 바로 받고 싶다면, 그것은 전사만으로는 되지 않는 별개의 작업이며, 언어 간 번역에서 찾아야 할 기능이다. WhatsApp 메시지가 아니라 파일로 갖고 있는 오디오, 즉 녹음 파일, 전달받은 첨부파일, 휴대폰에서 저장해둔 파일도 마찬가지인데, 이는 전사 앱이 처리하는 영역이고 WhatsApp 웹용 브라우저 확장 프로그램은 처리하지 못한다.
어조는 알려주지 않는다. 긴 메시지를 짧게 요약한 전사문은 망설임, 따뜻함, 짜증, 중요한 문장 앞의 정적을 걷어낸다. 친척이 얼마나 걱정하고 있는지 파악하려는 것이라면 글자만으로는 부족하고, 전사문을 앞에 두고 오디오를 다시 들어야 한다.
녹음 상태가 나쁜 오디오에서는 신뢰할 수 없다. 바람 소리, 차 안 스피커폰, 두 사람이 동시에 말하는 상황, 복도에서 녹음된 음성 메모. 입력 품질이 나쁘면 명백한 실패가 아니라 자신 있어 보이는 잘못된 전사문이 나오는데, 이것이 더 나쁘다. 완성된 것처럼 보이기 때문이다.
그리고 메시지가 정말로 모호한 경우에는 사촌을 대신할 수 없다. 이 방법이 해주는 것은 다른 누구도 그 메시지를 듣기 전에 그것이 모호한지 아닌지를 먼저 알아내게 해주는 것이다. 대부분은 모호하지 않고, 스스로 처리할 수 있다. 모호한 경우라면, 이제는 전체 녹음을 넘기는 대신 어느 30초에 관해 물어봐야 하는지 알게 된다.
