Naučí počítače porozumět znakovému jazyku? Mladý vědec vyvíjí chybějící překladač

Unikátní systém z Plzně analyzuje pohyby rukou i mimiku. Výsledkem má být aplikace, která dokáže znakový jazyk spolehlivě převést do psaných vět.

0

Počítačový překlad znakového jazyka

Tomáš Železný je doktorandem Fakulty aplikovaných věd Západočeské univerzity v Plzni (FAV ZČU), který se věnuje oblasti počítačového překladu znakového jazyka. Jeho systém analyzuje videozáznam mluvčího (a to včetně pohybů rukou, mimiky a práce se znakovacím prostorem) a převádí jej do gramaticky správných vět. Cílem tohoto výzkumu je vytvořit praktickou aplikaci, která v budoucnu usnadní komunikaci s neslyšícími uživateli znakového jazyka. Podobný překladač na trhu chybí. A pokud už existuje, funguje spíše na úrovni automatických překladačů z roku 2005, jak s nadsázkou podotýká sám doktorand.

Doktorand Tomáš Železný (Foto: Info.zcu.cz)

Překážky výzkumu 

Výzkum naráží na nedostatek dat. Pro český znakový jazyk existuje pouhých 30 hodin veřejných záznamů, zatímco pro americký znakový jazyk mají data čítající tisíce hodin. Tým proto databázi rozšiřuje o televizní (záznamy z ČT) a sněmovní přenosy (tiskové konference Poslanecké sněmovny). Pro kvalitní výzkum je třeba mít alespoň 10 tisíc hodin dat. Klíčová je také spolupráce s lingvisty a komunitou neslyšících. Spolupracovali s lidmi z USA a Saudské Arábie. Nově spolupracují se Spolkem neslyšících Plzeň. Uměle nahraná data podle textových předloh jsou totiž nepřirozená a systém kvůli nim chybuje.

Strojový překlad znakového jazyka do psaného textu (Foto: ilustrační foto, Gemimi.google.com)

Reel #doktorandiZČU s Tomášem Železným o aplikaci a o doktorandském studiu (obsahuje titulky): https://www.facebook.com/watch/?v=963253122984202 

Tomáš Železný je součástí série #doktorandiZČU (Foto: ZČU, Facebook.com)

Zdroj, foto: Info.zcu.cz, Facebook.com, Gemini.google.com
Editor: Kristýna Mariáková

Back to top button