Narzędzie AI Pomaga Użytkownikom z Utratą Wzroku Lepiej Zapamiętywać Otoczenie

System AI o nazwie VIPTour ma na celu znaczące ulepszenie sposobu, w jaki osoby niewidome lub niedowidzące (BLV) odkrywają nowe środowiska.

Zespół badawczy opracował system VIPTour, który umożliwia użytkownikom samodzielne odkrywanie parków i atrakcji turystycznych, co z kolei zwiększa ich przyjemność i zrozumienie przestrzeni. Wyniki ich badań zostały opublikowane w Nature.

System integruje kompaktowy aparat fotograficzny z aplikacją na smartfona, która uruchamia algorytm AI znanym jako FocusFormer. FocusFormer przetwarza sceny w czasie rzeczywistym, aby zidentyfikować ważne punkty, takie jak znaczniki bezpieczeństwa.

System dostarcza rekomendacje dotyczące eksploracji, które dostosowują się do indywidualnych preferencji użytkownika, takie jak wybór naturalnych dźwięków zamiast informacji historycznych.

Badacze twierdzą, że społeczność BLV może skorzystać z VIPTour dzięki spersonalizowanemu prowadzeniu opartemu na zainteresowaniach użytkowników, uproszczonym komunikatom dźwiękowym, opisom dotykowym skomplikowanych scen, a także możliwości odtwarzania i udostępniania wycieczki. System ma na celu zapewnienie funkcji służących do zwiększania doświadczeń użytkowników ponad podstawową pomoc.

W badaniach, w których uczestniczyło ponad 30 osób z BLV, korzyści były uderzające. Znacznie poprawiło się samopoczucie emocjonalne, z 67,9% wzrostem pozytywnych emocji i 94,7% wzrostem podekscytowania. Użytkownicy wykazali również 772,73% poprawę w przypominaniu scen, a retencja długotrwałej pamięci podwoiła się.

Wielu z nich zgłosiło, że czuje się bardziej autonomicznie, mniej zależnie od innych, aby poruszać się lub zrozumieć swoje otoczenie. Badacze zauważają, jak miliony osób z BLV są wykluczane z aktywności rekreacyjnych ze względu na niedostępne środowisko, zauważył zespół badawczy.

Chociaż istniejące narzędzia pomagają ludziom przemieszczać się z jednego miejsca do drugiego, często nie są w stanie stworzyć przyjemnych, niezapomnianych doświadczeń. VIPTour próbuje wypełnić tę lukę, łącząc zaawansowane AI z przemyślanym, skoncentrowanym na użytkowniku projektem.

Twórcy mają nadzieję, że VIPTour zainspiruje do stworzenia bardziej inkluzjwnych technologii, które skupiają się nie tylko na dostępności, ale także na autonomii i radości.