Google Translate tekee harppauksen reaaliaikaiseen kääntämiseen kuulokkeiden avulla Gemini-tekoälyn ansiosta

El Google-kääntäjä Se on käymässä läpi yhtä suurimmista muutoksistaan ​​lanseerauksensa jälkeen. Yritys on alkanut ottaa käyttöön ominaisuutta, jolla reaaliaikainen käännös suoraan kuulokkeisiisitekoälymallin ominaisuuksien tukemana KaksosetIdea on yksinkertainen selittää, mutta monimutkainen toteuttaa: joten kuulet lähes välittömästi kuulokkeidesi kautta, mitä toinen henkilö sanoo toisella kielellä, kanssa vähemmän robottimainen synteettinen ääni.

Tämä sopii Googlen strategiaan muuttaa Kääntäjä enemmän kuin vain yksinkertaiseksi tekstinkääntäjäksi. Se pyrkii nyt olemaan keskeinen työkalu kielten kommunikointiin ja oppimiseentekoälyn avulla sekä slangin ja kulttuuristen vivahteiden ymmärtäminen paremmin että käyttäjän avustaminen päivittäisessä toiminnassa. Tällä hetkellä uusi ominaisuus julkaistaan ​​vuonna tietyillä markkinoilla ja beta-vaiheessamutta se viittaa selvästi maailmanlaajuiseen käyttöönottoon tulevina vuosina.

Reaaliaikainen käännös millä tahansa kuulokkeilla

Mieleenpainuvin ominaisuus on uusi reaaliaikaisen keskustelun käännös kuulokkeiden kauttaSe, mikä aiemmin rajoittui tiettyihin malleihin, kuten Pixel Buds -kuulokkeisiin, on nyt saatavilla käytännössä kaikkiin puhelimesi kanssa yhteensopiviin kuulokkeisiin tai nappikuulokkeisiin. Tarvitset vain sovelluksen asennettuna. Google-kääntäjäLiitä kuulokkeet ja käytä reaaliaikaista käännöstilaa.

Androidilla prosessiin kuuluu sovelluksen avaaminen, keskustelukielten valitseminen ja painikkeen napauttaminen. "Live-käännös" (Live Translation). Sieltä puhelimen mikrofoni Se tunnistaa automaattisesti, milloin kukin henkilö puhuu ja millä kielellä.Se litteroi reaaliajassa, lähettää äänen Googlen palvelimille Gemini-sovelluksen käsiteltäväksi ja toistaa käännöksen kuulokkeiden kautta suhteellisen pienellä viiveellä.

Google selittää, että tekoäly on vastuussa säilyttää alkuperäisen puhujan sävyn, rytmin ja painotuksenNäin ymmärrät paitsi sanotun sisällön myös osan tarkoituksesta: onko joku vihainen, vitsaileeko vai puhuuko vakavammalla äänellä. Samanaikaisesti käännetyn keskustelun transkriptio näkyy mobiililaitteen näytöllä, mikä on hyödyllistä, jos haluat tarkistaa, mitä sanottiin, tai napauttaa tiettyä segmenttiä kuullaksesi sen uudelleen.

Ominaisuus otetaan aluksi käyttöön seuraavasti: beta-versio Kääntäjä-sovelluksessa Androidrajoitetusti saatavilla markkinoilla, kuten Yhdysvallat, Meksiko ja IntiaKieliyhteensopivuus on kuitenkin laaja: järjestelmä pystyy tarjoamaan reaaliaikaista äänikäännöstä yli 70 kieltä, tuhansilla mahdollisilla kieliparien yhdistelmillä.

Tapauksessa, jossa iPhoneGoogle on vahvistanut, että reaaliaikainen käännös kuulokkeilla on tulossa myös... Kääntäjäsovellus iPhonessavaikka käyttöönotto tapahtuukin myöhemmin. Yhtiö on asettanut tavoitteeksi Vuonna 2026 alueita laajennetaan ja ominaisuus julkaistaan ​​iOS:lleTämä jättää pitkän testausjakson ennen kuin se voidaan ottaa laajemmin käyttöön Euroopassa ja muissa maissa.

Miten Live Translate toimii ja mitä se tarjoaa päivittäin

Tekoälyn otsikon lisäksi käyttäjäkokemus on avainasemassa. Kun tila on aktivoitu "Live-käännös" Sovelluksessa käyttäjä voi keskustella katsomatta jatkuvasti näyttöä. Järjestelmä Toistaa käännöksen alkuperäisen äänen päälle jonka mikrofoni poimii, jolloin voit seurata puhetta, esitystä tai jopa opastettua kierrosta kuulokkeet päässä.

Sisäisten testien ja joidenkin erikoistuneiden tiedotusvälineiden mukaan Latenssi pidetään yleensä alle sekunnin Kun datayhteys on vakaa, tämä marginaali riittää keskustelun sujuvan kohtuullisen luonnollisesti ilman pitkiä taukoja lauseiden välillä. Käytännön vaikutus on havaittavissa esimerkiksi seurattaessa selitystä toisella kielellä tai kuunneltaessa ulkomaalaista puhujaa konferenssissa.

Yksi järjestelmän vahvuuksista on se, että Se ei vaadi "älykkäitä" kuulokkeita tai virallisia mallejaMitä tahansa matkapuhelimen kanssa toimivia Bluetooth- tai langallisia kuulokkeita voidaan käyttää käännösäänen lähtönä. Tämä erottaa ne suljetuimmista ratkaisuista, joissa tietyt toiminnot on rajoitettu tietyn merkin laitteisiin, ja antaa käyttäjille mahdollisuuden hyödyntää ominaisuutta ilman laitteiston päivittämistä.

Käytännössä suorituskyky vaihtelee ympäristön mukaan. Paikoissa, joissa voimakasta ympäristön melua Tai kun monet ihmiset puhuvat samaan aikaan, puheentunnistusvirheet lisääntyvät, mikä on yleistä kaikissa nykyisissä järjestelmissä. Googlen mukaan Gemini sisältää mekanismeja, jotka Suodata pois osa taustamelusta ja keskity lauluosuuksiinMutta hän myöntää, että ihanteelliset olosuhteet ovat edelleen suhteellisen hiljaiset huoneet ja selkeästi artikuloituvat puhujat.

Käyttötarkoituksen osalta työkalu on suunniteltu tilanteisiin, joissa on esimerkiksi matkoja, työkokouksia, kursseja, haastatteluja tai hallinnollisia menettelyjä toisella kielellä. Yksisuuntaisissa tilanteissa (joku puhuu ja muut kuuntelevat) kokemus on erityisen sujuva; erittäin nopeissa keskusteluissa tai useiden toisensa keskeyttävien keskustelukumppaneiden kanssa järjestelmällä voi olla enemmän vaikeuksia segmentoida kutakin interventiota.

Gemini: tekoäly, joka yrittää kuulostaa vähemmän robottiselta

Tämän uuden kuulokeominaisuuden ja muiden Google Kääntäjän parannusten takana on KaksosetGooglen kielimalli, jonka yritys integroi vähitellen keskeisiin tuotteisiinsa, kuten Haku ja Kääntäjä, pyrkii menemään sanatarkka käännöstä pidemmälle. tulkitse lauseiden koko merkitys.

Käytännössä tämä tarkoittaa sitä, että vähemmän kirjaimellisia ja luonnollisempia käännöksiäTämä pätee erityisesti silloin, kun käytetään puhekielisiä ilmaisuja, idiomeja tai paikallista slangia. Tyypilliset esimerkit, kuten englanninkielinen "stealing my thunder" tai espanjankieliset ilmaisut, kuten "me robó el pelo" (hän ​​veti jalkaani), johtivat usein outoihin tuloksiin kirjaimellisesti käännettynä. Geminin avulla järjestelmä analysoi asiayhteyden ja ehdottaa vaihtoehtoja, jotka heijastavat paremmin lauseen todellista merkitystä kohdekielellä.

Google väittää, että tämä lähestymistapa mahdollistaa jotta puhekuviot, hienovaraiset ironiat tai sävyn muutokset voidaan tallentaa paremminTämä vaikuttaa suoraan puhuttujen keskustelujen kääntämiseen. Neutraalin viestin kääntäminen ei ole sama asia kuin sarkastisen lauseen tai puoliksi vitsinä esitetyn kommentin kääntäminen. Vaikka virhemarginaalia on edelleen olemassa, yritys väittää, että sen sisäiset mittarit osoittavat kaksinumeroisia parannuksia käännösten laadussa verrattuna aiempiin järjestelmiin, erityisesti hyvin erilaisten kielten välillä.

Nämä ominaisuudet eivät rajoitu pelkästään ääneen. Myös tekoälyllä on rooli tekstin ja visuaalisen sisällön käännöskuten matkapuhelimen kameralla valokuvattuja kylttejä tai ruokalistoja. Ero on siinä, että nyt järjestelmä voi tarjota tuloksia luonnollisemmilla syntaktisilla rakenteilla, ehdottaa sanastovaihtoehtoja ja joissakin tapauksissa mukauttaa muodollisuuden tasoa asiayhteyden mukaan.

Kaikki tämä prosessointi tapahtuu yhdistämällä pilviresursseja laitteen omalla tasolla suoritettaviin tehtäviin. Osa raskaasta työstä tehdään Googlen palvelimilla, kun taas esimerkiksi puhesynteesi ja tietyt suodattimet käsitellään mobiililaitteella. Yrityksen mukaan Akunkulutus on verrattavissa äänipuhelun tai lyhyen videopuhelun kulutukseen.Siksi et tarvitse erityisen tehokasta laitteistoa käyttääksesi ominaisuutta satunnaisesti.

Käännöstyön tuolla puolen: Käännä kielenoppimisen työkaluna

Reaaliaikaisen kääntämisen ohella Google vahvistaa Kääntäjän koulutusprofiilia. Sovellus sisältää nyt Tekoälypohjaiset kieltenoppimistoiminnot, tarkoituksena täydentää tiettyjä alustoja, kuten Duolingoa tai iTranslatekorvaamatta niitä.

Uusien ominaisuuksien joukossa on parannettu ääntämispalauteNämä työkalut tarjoavat tarkempia ehdotuksia puhuttujen lauseiden harjoitteluun. Käyttäjä voi toistaa ilmaisun ja saada palautetta rytmistä, intonaatiosta tai huonosti artikuloiduista äänteistä, mikä auttaa heidän puheestaan ​​tulemaan natiivimaisempaa ja vähemmän robottimaista.

Sovellukseen on sisällytetty myös sarjajärjestelmä tai peräkkäiset harjoituspäivätTämä ominaisuus seuraa, kuinka monena peräkkäisenä päivänä työkalua on käytetty opiskeluun. Tämän tyyppinen mekanismi, joka on laajalle levinnyt opetussovelluksissa, pyrkii ylläpitämään motivaatiota pienten päivittäisten tavoitteiden ja jatkuvan edistymisen tunteen avulla.

Google alkaa julkaista näitä vaihtoehtoja noin 20 maassa ja alueella, ja aluksi läsnä markkinoilla, kuten Saksa, Intia tai RuotsiLaajentuessaan useammille Euroopan alueille sovelluksen odotetaan tulevan yleisemmäksi vaihtoehdoksi niille, jotka harjoittavat kieliä epämuodollisesti yhdistämällä sen kursseihin, luokkiin tai muihin aktiviteetteihin. Käännä videoita englannista espanjaksi.

Samaan aikaan yritys kokeilee Google Labsissa mm. kolme ilmaista oppimiskokemustaNäihin kuuluvat ehdotukset, kuten lyhyet oppitunnit, jotka keskittyvät hyödylliseen sanastoon, slangiin ja epämuodollisiin ilmaisuihin omistetut moduulit sekä visuaaliset aktiviteetit, joissa tekoäly tunnistaa valokuvissa olevia esineitä ja opettaa niiden nimet toisella kielellä. Vaikka nämä testit eivät olekaan varsinaisesti osa Käännä-sovellusta, ne viittaavat laajempaan kielityökalujen ekosysteemiin, joita kaikkia pyörittää sama tekoälymoottori.

Vertailu Appleen ja Euroopan rooli

Googlen lähestymistapa on ristiriidassa Applen lähestymistavan kanssa reaaliaikaisen kääntämisen alalla. Vaikka cupertinolaisessa yrityksessä on valittu ominaisuus, joka on integroitu sen omaan ekosysteemiin ja linkitetty... tietyt AirPods-mallitGoogle on valinnut ohjelmistopohjaisen ratkaisun, joka on yhteensopiva mitkä tahansa tavalliset kuulokkeetTämä ero on erityisen havaittavissa markkinoilla, joilla laitteiden monipuolisuus on normi, kuten eurooppalaisessa Android-ympäristössä.

Apple priorisoi paikallinen äänenkäsittelyEli suurin osa työstä tehdään itse iPhonella tai iPadilla. Tämä tarjoaa etuja yksityisyyden ja liitettävyyden suhteen, mutta rajoittaa järjestelmän skaalautuvuutta ja tuettujen kielten määrää; muita ratkaisuja, kuten Microsoft TeamsNe lisäävät reaaliaikaisen käännöksen. Google puolestaan ​​hyödyntää pilvipalveluita entistä intensiivisemmin, minkä ansiosta se voi hallita yli 70 kielen luettelo äänikäännöksissä ja päivittää malleja keskitetysti.

Eurooppalaisen käyttäjän näkökulmasta Googlen ehdotus saattaa vaikuttaa joustavammalta: se ei vaadi kuulokkeiden tai mobiililaitteen vaihtamista reaaliaikaisen käännöksen käyttämiseksi. On kuitenkin tärkeää pitää mielessä, että Ominaisuutta ei ole vielä aktivoitu kaikkialla Euroopassa.Vaikka sovelluksessa on jo keskustelun käännöstila ja muita edistyneitä työkaluja, jatkuva kuuntelu kuulokkeilla on vielä vaiheittaisen käyttöönoton alainen maakohtainen.

Google ei ole tarjonnut yksityiskohtaista aikataulua Espanjalle tai muulle EU:lle, mutta se on tehnyt selväksi, että tämä beta-vaihe auttaa Viiveen säätäminen, paikallisen aksentin tunnistuksen parantaminen ja palvelimien kuormituksen arviointi ennen kattavuuden laajentamista. On järkevää ajatella, että tekijät, kuten eurooppalaiset datasäännökset ja tasapaino paikallisen ja pilvipohjaisen käsittelyn välillä, vaikuttavat myös käyttöönottovauhtiin.

Vaikka vertailut Appleen keskittyvät yleensä kätevyyteen ja integrointiin, tässä tapauksessa on kyse esimerkiksi... Äänen yksityisyys ja arkaluonteisten tietojen hallintaGoogle väittää käyttävänsä suodattimia kohinan poistamiseksi ja käyttävänsä tietoja käännöksen laadun parantamiseen, mutta keskustelu siitä, miten näitä keskusteluja käsitellään, pysyy pöydällä, erityisesti alueilla, joilla on tiukat määräykset, kuten Euroopassa.

Kääntäjä, joka haluaa olla näkymätön välittäjä

Teknisten yksityiskohtien lisäksi tämän päivityksen viesti on, että Google Kääntäjä pyrkii olemaan yhä huomaamattomampi välittäjä ihmisten välillä, joilla ei ole samaa kieltäSe ei julkaise uusia laitteita tai pakota käyttäjiä opettelemaan monimutkaisia ​​käyttöliittymiä: se luottaa matkapuhelimiin, perinteisiin kuulokkeisiin ja Geminin ohjaamiin jatkuviin ohjelmistoparannuksiin.

Live-käännöstoiminto on vielä testausvaiheessa eikä saatavilla kaikilla markkinoilla, mutta se havainnollistaa selvästi alan kehitystä: Nopeampia käännöksiä, joissa on enemmän kontekstia ja jotka vastaavat paremmin sitä, miten todellisuudessa puhummeSamanaikaisesti integroidut oppimistyökalut ja slangin ja idioomien parantunut käsittely viittaavat Kääntäjän jokapäiväisempään käyttöön, ei vain tietyn matkan aikana selviämiseen.

Ilmeisiä haasteita on edelleen, aina tarkkuudesta meluisissa ympäristöissä erittäin paikallisten tai kulttuurisesti latautuneiden ilmaisujen käsittelyyn, puhumattakaan äänen lähettämisen seurauksista pilveen. Silti harppaus kirjaimellisesta käännöksestä vain muutaman vuoden takaa on huomattava: monille käyttäjille yhdistelmä Gemini, Google Translate ja jotkut tavalliset kuulokkeet Se alkaa riittää navigoimaan jonkin verran vaivattomasti keskusteluissa, jotka aiemmin olisivat olleet mahdottomia ilman ihmistulkkia.

Alberto Navarro

Olen teknologian harrastaja, joka on muuttanut "nörtti"-harrastuksensa ammatiksi. Olen käyttänyt yli 10 vuotta elämästäni uusinta teknologiaa käyttäen ja kaikenlaisten ohjelmien parissa puhtaasta uteliaisuudesta. Nyt olen erikoistunut tietotekniikkaan ja videopeleihin. Tämä johtuu siitä, että yli 5 vuoden ajan olen työskennellyt kirjoittaen useille teknologiaa ja videopelejä käsitteleville verkkosivustoille ja luonut artikkeleita, jotka pyrkivät antamaan sinulle tarvitsemaasi tietoa kielellä, jota kaikki ymmärtävät.

Jos sinulla on kysyttävää, tietoni ulottuu kaikesta Windows-käyttöjärjestelmään liittyvästä sekä matkapuhelimien Androidista. Ja sitoumukseni on sinulle, olen aina valmis käyttämään muutaman minuutin ja auttamaan sinua ratkaisemaan kaikki kysymyksesi, joita sinulla saattaa olla tässä Internet-maailmassa.