실시간 통화 번역의 작동 방식

나에게 해 주는 일

• 통화 중 각자 자기 언어로 말하고 듣습니다.
• 음성 번역이 없는 언어라면 상대방은 대신 자막을 읽습니다.
• 번역이 도착하기 전까지는 침묵 대신 상대방의 실제 목소리가 들립니다.

작동 방식

두 사람이 동의하면 번역 프로그램이 조용한 참가자로 통화에 참여합니다. 각 사람의 음성을 받아 짧게 나누어 클라우드 음성 모델로 스트리밍하고, 모델은 말을 인식해 번역한 뒤 결과를 소리로 만듭니다. 번역 프로그램은 번역된 음성을 상대방을 위해 통화에 재생하거나, 음성이 없는 언어에는 자막을 보냅니다.

번역 프로그램은 서버의 나머지 부분과 분리된 프로세스로 실행되므로, 번역 통화가 동시에 많아도 서로나 일반 채팅을 느리게 하지 않습니다.

결과에 영향을 주는 것

• 양쪽 모두 안정적인 인터넷 연결.
• 한 번에 한 사람씩, 짧은 문장으로 말하기.
• 조용한 장소. 주변 소음은 인식을 떨어뜨립니다.

사용하는 기술

WebRTC · 스트리밍 음성 인식 · 기계 번역 · 음성 합성