Teknologi · AiThao

Hvordan samtaleoversettelse fungerer

I en samtale med oversettelse snakker du, og et sekund senere hører den andre personen setningen på sitt eget språk. Slik fungerer denne prosessen bak kulissene.

Veien fra tale til oversettelse

Når du snakker, oppdager telefonen pauser i talen og sender det ferdige lydsegmentet til oversettelsestjenesten i skyen. En talegjenkjenningsmodell gjør lyden om til tekst på ditt språk, en oversettelsesmodell oversetter teksten til mottakerens språk, og en talesyntesemodell genererer den nye stemmen.

Den resulterende lydfilen strømmes umiddelbart til mottakerens telefon og spilles av, mens teksten samtidig vises i undertekstlinjen på skjermen.

Hva du hører

Når motparten snakker, hører du først en lav bakgrunnslyd av deres originale stemme, etterfulgt av den klare oversatte stemmen. Dette bevarer samtalerytmen og gjør det tydelig hvem som snakker.

Hvis du eller den andre har opprettet en personlig stemme i AiThao på en støttet enhet, vil oversettelsen tilstrebe å etterligne klangen i originalstemmen.

Hva du ser

Samtaleskjermen viser to linjer med undertekster: hva du sa på ditt språk, og hvordan det ble oversatt for mottakeren. Dette gir umiddelbar bekreftelse på at ordene dine ble oppfattet riktig.

Hvis en av partene bruker et språk som kun støtter undertekster uten talesyntese, fungerer tekstlinjen som hovedmedium for samtalen.

Hvorfor direkteoversettelse likevel tar litt tid

En datamaskin kan ikke oversette en setning presist før hele meningen er ytret, fordi ordstilling og grammatikk varierer mellom språk. Systemet venter på en naturlig pause i talen før oversettelsen settes i gang.

Forsinkelsen er vanligvis mellom ett og to sekunder, avhengig av nettverkets svartid og setningens lengde. Korte, konsise setninger gir raskest oversettelse.

Når skyen kan høre samtalen

Oversettelse starter først etter at begge deltakere har samtykket. Ved en kryptert samtale overleveres samtalenøkkelen til oversetteren i skyen; dekodet lyd når oversettelsestjenesten, og samtalen er ikke lenger ende-til-ende-kryptert. Krypteringsindikatoren forsvinner. Video sendes aldri til oversetteren.

Å slå av oversettelse stanser skybehandlingen, men tar ikke nøkkelen tilbake for den pågående økten. For en senere samtale uten oversettelse starter du en ny uoversatt samtale og sjekker krypteringsikonet på støttede telefoner. Siden om samtalesikkerhet forklarer dette skillet i detalj.

Spørsmål

Blir samtalen min tatt opp for å oversettes?

Nei. Lyden strømmes midlertidig til oversettelsestjenesten mens du snakker, og AiThao lagrer ikke samtalen.

Hvorfor er det en kort forsinkelse?

Talen må gjenkjennes, oversettes og syntetiseres på nytt. Forsinkelsen avhenger av nettet, språkene og setningslengden.