1

ChatGPT kan lära sig handalfabet och teckenspråk

Foto: Adobe stock

Timothy Morgan, en döv programmerare i Australien, har framgångsrikt tränat ChatGPT att förstå det australiska teckenspråkets (AUSLAN) handalfabet samt enkla tecken.

Timothy skrev på X ”Lägg undan handskarna, kära hörande människor” och hänvisade till de handskar som kan översätta teckenspråk, som i årtionden marknadsförts som en banbrytande uppfinning. Timothy använder i stället videofilmer där han tecknar ”Mitt namn är Timothy” eller ”Hur mår du?” på AUSLAN och låter ChatGPT analysera och översätta filmerna.

ChatGPT är en AI-språkmodell utvecklad av företaget OpenAI. Den är designad för att förstå naturligt språk och generera människoliknande svar baserat på den input den får. Bland annat kan ChatGPT svara på frågor, skapa texter och berättelser om olika ämnen samt hjälpa till att lösa problem. ChatGPT kan läras upp genom frekvent användning, men kan också tränas specifikt för ett förutbestämt ändamål.

Timothy betonar i sitt inlägg på X att han har tränat upp sin version av ChatGPT så att den nu förstår handalfabetet, som endast består av handrörelser. En person frågade Timothy om han också har provat att lära ChatGPT riktade verb och rollbyten. Timothy svarade att detta ännu inte är möjligt eftersom det överstiger hans språkliga kunskaper samt programmeringskunskaper.  Timothy berättar att den manuella inlärningen till ChatGPT innebär mycket detaljarbete, eftersom Timothy laddat upp videor av sig själv när han använder AUSLAN-tecken. För varje tecken gav han detaljerade kommentarer och kontext för att hjälpa ChatGPT att förstå nyanserna.

Dr Maartje De Meulder, en döv lingvist, berömde implementeringen och menar att den kan leda till många möjligheter för döva framöver. Längre fram vill Timothy automatisera träningsprocessen så att fler människor har möjlighet att lära AI-språkmodellen att teckna och använda den för att översätta.

När Teckenrapport frågade ChatGPT vilka teckenspråk den kan översätta till text i dagsläget genererade den fram ett svar som säger att den kan översätta från åtta olika teckenspråk; amerikanskt, brittiskt, australienskt, östereikiskt, franskt, tyskt, japanskt och kinesiskt teckenspråk.

Wille Felix Zante, Taubenschlag

Översatt och redigerad av Kenny Åkesson

nyhet@teckenbro.com