Newsletter Subscribe
Enter your email address below and subscribe to our newsletter
[forminator_form id="25163"]

deepmind+1deepmind+1deepmindGoogle Alphabet Inc. DeepMind kynnti í dag SL2T, táknmáls-yfir-í-texta líkan, sem er í fyrsta sinn sem gervigreind fyrir táknmál er innbyggð í snjallsíma. Líkanið knýr táknmálsritun í Gboard og Live Transcribe á Pixel 11 og styður í upphafi þýðingu úr bandarísku táknmáli yfir á ensku.deepmind+1
Eiginleikinn gerir heyrnarlausum og heyrnarskertum notendum kleift að nota táknmál fyrir framan myndavél símans hvar sem þeir myndu venjulega skrifa, hvort sem er við leit á netinu, ritun skilaboða, fyrirspurnir til Gemini eða í samtölum augliti til auglitis í gegnum Live Transcribe. Google segir að prófunaraðilar hafi fundið að það sé hraðvirkara og eðlilegra að nota táknmál en að skrifa á ensku.siliconangle+1
SL2T var þjálfað með yfir 100.000 klukkustundum af táknmálsgögnum á fleiri en 50 táknmálum, þar sem um fjórðungur var á bandarísku táknmáli. Í stað þess að vinna úr hráu myndskeiði notar líkanið MediaPipe Holistic sem fylgist með 130 lykilpunktum á andliti, líkama og höndum táknmálsnotandans og sendir aðeins rúmfræðileg hnit til netþjóna Google. Upprunalega myndskeiðið er eytt samstundis.unite+1
Líkanið þýðir beint úr hnitum yfir í texta og sneiðir hjá millistigum sem fyrri kerfi reiddu sig á. "Einfaldar merkingar ná ekki að fanga ríka og ólínulega þætti táknmála eins og svipbrigði og rýmisnotkun," sagði DeepMind. "Með því að þýða beint úr hnitum hverfa gervitakmarkanir á orðaforða og þýðingargæði aukast í takt við gögnin."engadget
Á FLEURS-ASL viðmiðunarprófinu nær SL2T 70 stigum á BLEURT-kvarða, sem Google lýsir sem mun hærri árangri en áður hefur sést.deepmind+1
Google stofnaði ráðgjafarnefnd um táknmál og gervigreind þar sem samtök á borð við National Association of the Deaf og World Federation of the Deaf komu að borðinu. Skýrsla sem unnin var í samvinnu skilgreinir SL2T 1.0 sem hjálpartæki fyrir óformlegar aðstæður og útilokar notkun í læknisfræðilegum, lagalegum, lögreglutengdum eða atvinnutengdum tilgangi. Skýrslan tekur fram að tækið uppfylli ekki lagalegar kröfur um sanngjarnar aðlaganir samkvæmt lögum um réttindi fatlaðra.unite
Þekktar takmarkanir eru meðal annars minni nákvæmni í lítilli birtu, enginn stuðningur fyrir fleiri en einn táknmálsnotanda, 60 sekúndna tímamörk á hverju myndskeiði og engin samtalsminni á milli myndskeiða. Líkanið var ekki þjálfað á einstaklingum undir 18 ára aldri.unite
Verkefnið á rætur sínar að rekja til Sam Sepah, heyrnarlauss starfsmanns Google, og sjónarmið heyrnarlausra mótuðu hvert stig verkefnisins. Google áformar að bæta við fleiri táknmálum og tækjum og rannsóknir á myndun táknmáls eru í fullum gangi. Eiginleikinn er aðgengilegur án aukakostnaðar.siliconangle+1