당신만의 목소리
당신의 목소리
InterMIND이 다른 참가자를 위해 회원님의 음성을 번역할 때, 그들은 기계적인 텍스트 음성 변환 내레이터를 듣는 것이 아닙니다. 그들은 회원님의 음색과 말하는 방식을 그대로 간직한 채, 이제는 그들의 언어로 말하는 회원님의 것임을 분명히 알아볼 수 있는 목소리를 듣게 됩니다.
이 기능은 양방향으로 작동하며 각 참가자마다 독립적으로 적용됩니다. 다섯 사람이 다섯 가지 언어를 사용하는 회의에서, 각 사람은 자신의 언어로 다른 네 사람의 말을 듣게 되며, 그 네 사람의 목소리는 여전히 각자의 것으로 들립니다.
어떻게 들리는지
대부분의 라이브 번역 도구는 화자를 하나의 일반적인 합성 음성으로 대체합니다. 그 결과 말은 알아들을 수 있지만 평면적입니다 — 누가 말하고 있는지, 강조점, 개성을 잃게 됩니다. InterMIND은 화자의 목소리를 유지합니다. 따라서 번역된 회의는 기계가 읽어주는 공지 사항의 나열이 아니라, 실제 회의에 참여한 사람들 사이의 대화처럼 느껴집니다.
작동 방식
InterMIND은 다단계 파이프라인을 사용하며, 음성 단계는 마지막 단계입니다:
- 음성 인식 — 회원님의 말이 회원님이 말하는 대로 회원님의 언어로 전사됩니다.
- 세분화 — 전사본은 안정적인 문장 단위(절)로 그룹화되어 회원님이 문장을 끝내기 전에 번역이 시작될 수 있습니다.
- 번역 — 각 단위는 점진적으로 듣는 사람의 언어로 번역됩니다.
- 음성 합성 — 각 번역된 단위는 회원님 자신의 목소리 샘플을 사용하여 말해지고, 듣는 사람에게 전송됩니다.
회의가 회원님의 목소리를 모델링하기에 충분한 음성을 아직 수집하는 동안(대략 처음 5–10초), 합성은 회원님이 원본 언어로 방금 말한 내용과 일치하는 음성 단편을 사용합니다. 충분히 긴 샘플이 확보되면, 이후 모든 부분에 그 샘플을 사용하도록 전환됩니다. 실제로는 그 전환을 인식하지 못합니다 — 통화가 진행됨에 따라 번역은 점점 더 회원님의 목소리에 가까워집니다. 회원님의 목소리를 완벽하게 재현하는 것은 아니지만, 일반적인 내레이터가 아닌 분명히 회원님의 목소리로 인식됩니다 — 그리고 모델이 회원님의 음성을 더 많이 들을수록 계속 개선됩니다.
언어
회원님의 목소리 번역은 23개 음성 언어 전부에서 이용할 수 있습니다 — 언어 선택하기에 나열된 것과 동일한 목록입니다. 별도로 활성화할 것은 없습니다: 번역이 켜져 있을 때, 참가자들은 자동으로 회원님을 회원님의 목소리로 듣게 됩니다.
저장된 음성 샘플(선택)
로그인한 사용자는 설정 → 번역에서 회원님의 목소리에서 한 번 음성 샘플을 녹음하여 웜업을 건너뛸 수 있습니다: Record my voice 버튼을 누르고, 1부터 10까지의 숫자를 임의의 순서로 말하면, 10개가 모두 켜질 때 샘플이 자동으로 저장됩니다. 다음 회의부터 회원님의 번역된 음성이 첫 문장부터 해당 샘플로 합성됩니다.
프라이버시
두 개의 샘플, 두 개의 수명. 회의 중 웜업에 사용되는 라이브 샘플은 일시적입니다: 실시간 회의 기간 동안만 존재하며 어디에도 저장되지 않습니다; 실시간 세션을 구동하는 Mind API와 SDK는 회의 세션이 종료되면 어떤 데이터도 보관하지 않습니다. 설정에서 가져온 저장된 샘플은 회원님의 계정에 하나의 목적, 즉 회원님의 번역된 음성을 합성하기 위해 저장되며, 회의에 참가할 때마다 번역 엔진으로 전송된 후, 회원님이 샘플을 제거하거나 계정을 삭제하는 순간 삭제됩니다. 둘 다 InterMIND의 비디오 및 음성 녹화 기능이 아닙니다 — 녹화 기능은 별도로, 의도적으로 시작하는 명시적인 녹화입니다.
로드맵에서: 립싱크
회원님의 목소리로 번역을 듣는 것은 더 큰 목표의 첫 번째 부분입니다. 우리가 작업 중인 다음 단계는 립싱크입니다 — 카메라에서 화자의 입 모양을 번역된 음성에 맞춰 재조정하여, 각 참가자가 상대방의 언어로 말하는 것처럼 보이게 하는 것입니다. 회원님 목소리 번역과 결합하여, 공용 언어가 없는 사람들이 각자가 상대방의 언어를 원어민처럼 구사하는 것처럼 서로를 보고 듣는 통화를 목표로 합니다.
이는 로드맵 항목이며 아직 출시된 기능이 아닙니다 — 위의 회원님 목소리 번역은 현재 사용 가능합니다.