A szenzorok, érzékelők, illetve az ezekre épülő hordható eszközök egyre több területen formálják át világunkat. A már hétköznapivá vált órák, fitnesz trackerek mellett a kutatók is egyre többet foglalkoznak ezzel a területtel, aminek kiváló példája a Texas A&M Egyetem fejlesztése alatt álló, a jelbeszéd lefordítására képes eszköze.

Gesztus alapú fordítás

A rendszer leginkább arra a Myo nevű vezérlőre hasonlít, amiről már korábban is beszámoltunk, és ami az alkarra rögzítve, az izmok mozgását fordítja át parancsokra. Az amerikai egyetem orvosbiológiai mérnök karán megépített készülék célja az, hogy a jelbeszéddel kommunikálók karján elhelyezve képes legyen a szavak, kifejezések valós idejű lefordítására, ami nagy segítséget nyújtana azoknak, akik nem ismerik a jelelést.

Ahogy a Myo esetében, az érzékelők itt is az izmok aktivitását, mozgását, elektromos impulzusait figyelve alakítják át a kar mozgásait szavakká. Az eszköz még prototípus szakaszban van ugyan, de már most 40, az amerikai jelbeszédben használt kifejezést képes 96 százalékos biztonsággal felismerni és lefordítani.

Eddig is léteztek hasonló törekvések a probléma megoldására, de ezek általában képalkotáson alapultak, azaz kamerával rögzítették a jeleket, majd próbálták azokat lefordítani. A videó alapú felismerés azonban erőteljesen függ az aktuális fényviszonyoktól, több, személyiségi jogokkal kapcsolatos kérdést is felvet, illetve a kamera miatt a hordozhatósága is limitált.

Van még vele munka

A Texas Instruments partnerségében fejlesztett megoldás minderre választ ad, viszont két területen még sok munkára van szükség. Az egyik probléma az, hogy a jelrendszer egységes ugyan, viszont mindenki egy kicsit eltérő, egyedi módon használja őket, így a rendszernek eleinte tanulnia kell használójától. A másik leküzdendő feladat a miniatürizálás, hiszen a fotók és videók tanúsága szerint ebben a formában még nem alkalmas a hétköznapi viseletre.

Ha elkészül a tervezett, csuklón viselhető méret és forma, akkor a szavak után jön a komplett mondatok felismerésének képessége, végül pedig egy hang átalakító, ami újabb hatalmas lépés lenne a siketek és a hallók között akadályok leküzdésében.