Valós idejű jelnyelvi tolmács lehet a mesterséges intelligencia
A Floridai Atlanti Egyetem kutatói megtanították a YOLOv8 mesterséges intelligenciát (MI) a siketek jelbeszéde csaknem harmincezer jelének felismerésére, és az ezzel történő közlések értelmezésére.
A modell hozzájárul olyan eszközök létrehozásához, amelyek javíthatják a siket és nagyothalló közösség kommunikációját
A nagyothallók és siketek kommunikációjában főszerepet játszik a jelbeszéd, amely kézmozdulatokkal, arcjátékkal, testbeszéddel teszi lehetővé bonyolult mondanivalók kifejtését. Ennek minden nyelvben külön szótára, nyelvtana és mondattana van, például még a brit, az ausztrál és az amerikai jelnyelv is különbözik egymástól. Már eddig is készültek olyan programok, amelyek valós időben próbálják lefordítani a jelnyelvet (írott) szavakra, a kezekre szerelt mozgásérzékelőket és komputeres képalkotó technológiákat használva. A Floridai Atlanti Egyetem számítógép-tudományi tanszékének kutatói most olyan kísérletről számoltak be, amelynek során az amerikai jelnyelv (ASL) csaknem 30 ezer statikus jelének fordítógéppel való értelmezését tették lehetővé.
A MediaPipe, a Google mesterséges intelligenciája segítségével minden gesztust 21 jellemzője alapján írtak le, ezekkel bőséges információt nyújtva a kezek szerkezetéről, pozíciójáról. Ezek az adatok sokat segítettek a YOLOv8 gépi tanulás program fejlesztésében, képzésében ahhoz, hogy sokkal jobban értelmezze a finom eltéréseket a kézhelyzetek között, mindezt figyelemre méltó, 98 százalékos pontossággal teszi. Kutatók korábban már dolgoztak a YOLOv5-tel is, ami nagyon könnyen kezelhető, de annak a pontossága még jó tíz százalékkal alacsonyabb volt.
A hallássérültek számára hatalmas előrelépés volna egy olyan applikáció, amely az általuk jelnyelven elmondottakat mások számára érthető szöveggé alakítaná. A továbbiakban még fejlesztik a modellt, hogy nagyobb adatbázisa legyen a különböző kézformákról és gesztusokról annak érdekében, hogy jobban meg tudja különböztetni a hasonló gesztusokat, ezzel növelve pontosságát, továbbá olyan segédeszközöket készítenek hozzá, amelyekkel biztosítható a valósidejűség olyan környezetben, ahol a mozdulatok nehezebben értelmezhetők.
Forrás: Népszava
A rádiót önkéntes formában, nonprofit módon üzemeltetjük. Azonban a működtetés költségeit már nem tudjuk kitermelni saját pénzből (szerverek üzemeltetése, karbantartása). Amennyiben lehetősége van, kérjük támogassa a Hobby Rádió éves 120000 Ft-os működési díját!Net-média Alapítvány (Magnet Bank): 16200113-18516177-00000000
Utalás közleménye: támogatás
Köszönjük, ha nekünk adja adója 1 %-át!
Adószám: 18129982-1-41
Ezeket is olvassa el:
A siket embereknek is joguk van élvezni Beton.Hofi vagy Krúbi koncertjeit
Fülben rejlő inkluzivitás – bemutatkozik a hEarrings | Dress-coding
Több mint 60 ezer embernek lenne rá szüksége Magyarországon: a hallókészülék helyett jelent megoldás...
Weisz Fanni kisfia még nem beszél, de jelnyelvvel már kommunikál
Egyre több tévéműsort akadálymentesítenek
Reklám
Keresés az oldalon
Facebook oldalunk
Mai műsor
Bejelentkezés
Mai napi információk
Időjárás
17°C







Vélemény, hozzászólás?