Elektronika noszona pomoże głuchoniemym

fot. pixabay

Naukowcy z Korei Południowej opracowali nowy system tłumaczenia języka migowego oparty na siedmiu pierścieniach wyposażonych w czujniki. Według nowego badania, opublikowanego w czasopiśmie Science Advances, technologia ta niezawodnie rozpoznaje i tłumaczy zarówno amerykański, jak i międzynarodowy język migowy z dokładnością dochodzącą do 88%.

Dla wielu osób głuchoniemych język migowy jest podstawowym środkiem komunikacji. Daleko mu do zestawu gestów, ponieważ jest to w istocie złożony język z własną składnią, gramatyką i strukturą. Utrudnia to osobom nieznającym języka migowego komunikację z osobami nim władającymi. Wyzwanie to jest jeszcze bardziej złożone, biorąc pod uwagę, że według Światowej Federacji Głuchych na świecie używa się ponad 300 różnych jego odmian.

Do obecnie dostępnych sposobów pokonywania tej bariery językowej należą nieporęczne rękawice lub przewodowe układy czujników, ale często są one niewygodne, ograniczają naturalne ruchy dłoni i wymagają kalibracji dla każdego użytkownika. Aby rozwiązać te problemy, naukowcy opracowali system WRSLT, który składa się z siedmiu małych pierścieni umieszczanych na wybranych palcach. Każdy z nich zawiera maleńki akcelerometr. Gdy osoba miga, czujniki mierzą położenie palców względem ziemii i rejestrują kierunek ruchu dłoni. Sygnały te są następnie przesyłane do smartfona lub komputera za pośrednictwem technologii Bluetooth Multilink. Na koniec sztuczna inteligencja interpretuje ruchy i gesty, przekształcając je w tekst pisany.

Obecnie WRSLT potrafi rozpoznać 100 słów w amerykańskim języku migowym (ASL) i tyle samo w międzynarodowym języku migowym (ISL). System został przeszkolony na dużej grupie użytkowników, a następnie przetestowany na kolejnej, niebiorącej udziału w szkoleniu. Poprawnie rozpoznał słowa w ISL z dokładnością 88,5%, a słowa w ASL z dokładnością 88,3%.

Kolejnym zadaniem zespołu badawczego jest dalsza miniaturyzacja pierścieni i rozszerzenie danych treningowych sztucznej inteligencji o więcej słów i różne języki migowe.

(rr)