Technologia · AiThao

Jak działa tłumaczenie rozmów na żywo

W rozmowie z tłumaczeniem mówisz w swoim języku, a druga osoba chwilę później słyszy swój. Oto droga, którą przebywa twój głos.

Co to daje tobie

  • Każdy mówi i słucha w rozmowie w swoim języku.
  • Gdy dla danego języka nie ma tłumaczenia mówionego, druga osoba czyta napisy.

Jak to działa

Gdy obie osoby się zgodzą, do rozmowy dołącza tłumacz jako milczący uczestnik. Bierze dźwięk każdej osoby, tnie go na krótkie fragmenty i przesyła strumieniowo do modelu mowy w chmurze, który rozpoznaje mowę, tłumaczy ją i wypowiada wynik. Tłumacz odtwarza przetłumaczoną mowę w rozmowie dla drugiej osoby albo wysyła napisy dla języków bez głosu.

Tłumacze działają w osobnych procesach, oddzielnie od reszty serwera, więc wiele równoczesnych rozmów z tłumaczeniem nie spowalnia ani siebie nawzajem, ani zwykłych czatów.

Co wpływa na wynik

  • Stabilne połączenie z internetem po obu stronach.
  • Jedna osoba mówi naraz, krótkimi zdaniami.
  • Ciche miejsce: hałas w tle pogarsza rozpoznawanie.

Pod maską

WebRTC · strumieniowe rozpoznawanie mowy · tłumaczenie maszynowe · synteza mowy

Dźwięk, napisy i prywatność

Tłumaczenie jest wybrane domyślnie i zaczyna się po zgodzie obu osób. W zwykłym trybie słyszysz przetłumaczony głos. Gdy brakuje zgody lub tłumaczenie nie może się rozpocząć, słyszysz oryginalny głos. Napisy wyświetlają tę samą przetłumaczoną treść; włącz je dla języków bez tłumaczenia głosowego.

Aby tłumaczyć, proces tłumaczenia otrzymuje klucz połączenia i przetwarza odszyfrowany dźwięk w chmurze; obraz wideo nie jest wysyłany do tłumaczenia. Połączenie nie jest już szyfrowane end-to-end. Wyłączenie tłumaczenia zatrzymuje przetwarzanie, ale nie cofa udostępnienia klucza. Aby rozmawiać bez tłumaczenia w chmurze, rozpocznij nowe połączenie bez tłumaczenia i sprawdź wskaźnik szyfrowania.

Częste pytania

Czy moja rozmowa jest nagrywana, żeby ją przetłumaczyć?

Nie. Dźwięk jest przesyłany strumieniowo do usługi tłumaczenia, gdy mówisz, a AiThao nie nagrywa rozmowy.

Skąd krótkie opóźnienie?

Mowę trzeba rozpoznać, przetłumaczyć i wypowiedzieć ponownie. Opóźnienie zależy od sieci, języków i długości każdego zdania.