영상 속에 이런 한마디가 있었다고 하자.

We meet on Friday. Sorry, Saturday.

화면의 일본어 자막은 '토요일에 만나자'이다. Friday라고 들은 내 귀가 틀렸는지, 자막이 틀렸는지——어느 한쪽을 의심하고 싶어진다. 하지만 어느 쪽도 틀리지 않았다.

말한 사람은 분명 Friday라고 말했고, 곧바로 Saturday라고 고쳐 말했다. 발화로서 Friday는 분명히 존재하고, 일정으로서는 토요일이 맞다. 자막은 말을 고친 뒤의 결론을 번역하고 있을 뿐이다.

그래서 음성과 문자가 어긋날 때의 질문은 '어느 쪽이 맞는가'가 아니다. '나는 무엇을 알고 싶은가'이다. 그 질문에 따라 믿어도 되는 문자가 달라진다.

  • 내용: 결국 언제 만나는가.
  • 발화: 실제로 뭐라고 말했는가.
  • 시각: 그 말을 언제 했는가.

자막에도 대본에도 종류가 있고, 각각 잘 답하는 질문이 다르다. 그 점을 잘못 보면, 올바른 문자를 보고 있는데도 확인이 어긋난다.

번역 자막은 결론을 번역한다

일본어 자막은 영어의 번역이다. 제한된 글자 수와 표시 시간 안에서 말더듬이나 말 고침을 생략하고, 최종적으로 전해지는 내용으로 정리한다. 'Friday, 아니, Saturday'를 '토요일에 만나자'라고 번역하는 것은 내용으로서 정확하다.

다만 듣기를 확인하는 데는 적합하지 않다. 자막에 나오지 않는 Friday가 마치 잘못 들은 것처럼 보이게 되기 때문이다. 자막이 나쁜 것이 아니다. 하고 있는 일이 다를 뿐이다.

영어 대본도 깔끔하게 다듬어져 있다

영어로 쓰여 있다고 해서 말한 그대로인 것은 아니다. 읽기 쉬움을 우선해 Sorry나 말 고침을 빼고 We meet on Saturday. 라고만 쓴 대본도 흔히 있다.

공식 대본이라고 해서 한 글자 한 글자 그대로인 것도 아니다. 예를 들어 TED 공식 도움말은 TED.com 영상에서 재생 위치와 연동되는 대화형 문자 대본을 찾는 법을 안내하고 있다. 편리한 기능이지만, 그 설명만으로 같은 이름의 팟캐스트판과도 시각이나 모든 발언이 일치한다고까지는 할 수 없다. 판이 다르면 대응하는 문자도 달라진다.

결국 그 문자가 말한 말을 남기기 위해 만들어졌는지, 내용을 읽기 쉽게 전하기 위해 만들어졌는지. 거기가 분기점이다.

자동 자막은 음성 인식의 결과이다

YouTube 자동 자막은 기계 학습에 의한 음성 인식으로 만들어진다. YouTube 도움말에 따르면 발음이나 억양, 방언, 잡음 등에 따라 올바르게 표시되지 않을 수 있다. 처음부터 완벽한 대본으로 다룰 것이 아니다.

말을 고친 부분이 Friday sorry Saturday처럼 남아 있으면, 말을 고쳤다는 단서는 된다. 하지만 말 고침이나 말더듬이 항상 남는 것은 아니고, Friday 자체가 다른 단어로 표시될 수도 있다. 맞는 부분과 틀린 부분이 섞인 문자로서, 음성과 대조하면서 쓸 수밖에 없다.

대본이 먼저 있었거나, 판이 다르기도 한다

녹음 전 대본에서는 금요일 일정이었던 것이 본방송에서 고쳐 말해졌을지도 모른다. 편집으로 일부를 잘라 낸 판이나, 영상과 팟캐스트처럼 형태가 다른 판도 있다면, 손에 있는 대본이 어느 녹음에 대응하는지도 영향을 준다. 대본을 찾았다면 어느 판에 대응하는 것인지 페이지 설명에서 확인한다. 그 과정을 건너뛰면 확인은 계속 어긋난다.

자막이 먼저 나오기도 한다

자막은 한 문장씩 묶어서 표시된다. 말하는 사람이 아직 Friday라고 말하고 있는 도중에 '토요일에 만나자'가 먼저 나와 있으면, Friday를 토요일로 번역한 것처럼 보인다. 이 경우 내용은 맞고, 어긋난 것은 표시 시각뿐이다. 앞뒤 몇 초를 다시 듣고 말 고침이 이어지는지 보면 알 수 있다.

구분해서 쓰는 법은 간단하다. 일정이나 이야기의 결론을 알고 싶다면 번역 자막으로 충분한 경우가 많다. 다만 말을 고친 곳에서는 앞뒤를 듣고 결론이 자막과 맞는지 본다. 듣기를 확인하고 싶다면 말한 그대로 적힌 영어 문자를 쓰고, 그 대본이 말 고침을 남기는 방식으로 쓰였는지까지 확인한다. 말한 부분의 시각을 알고 싶다면 자막의 표시 시각이 아니라 재생 위치를 움직여 음성으로 확인한다.

Friday는 발화 속에 분명히 있고, 토요일은 일정의 결론이다. 어느 한쪽을 정답으로 삼아 다른 쪽을 버릴 필요는 없다. 눈앞의 문자가 발화를 남기기 위한 것인지, 내용을 전하기 위한 것인지——그것을 보면 어긋남은 혼란이 아니라 단서가 된다. 대본 유무를 포함한 소재 선택에 대해서는, 공개된 연습 소재를 보는 다섯 가지 관점에서 자세히 다루고 있다.