reklama
reklama
reklama
reklama
reklama
© Pixabay Przemysł elektroniczny | 18 kwietnia 2018

Usłyszeć obraz – nowatorski system odczytywania kolorów przy pomocy dźwięków

Naukowcy z Politechniki Łódzkiej opracowali nowatorski system, który umożliwia - przy użycia sensora ruchu - odczytywanie obrazów cyfrowych za pomocą dźwięku.
Projekt przeznaczony jest dla osób niewidomych i słabo widzących, ale też może wnieść nową jakość do obcowania ze sztuką wśród osób w pełni sprawnych – przekonuje dr inż. Radosław Bednarski z Instytutu Informatyki PŁ.

Dzięki stworzonemu przez naukowców systemowi osoby z dysfunkcją wzroku będą np. mogły zapoznać się z kolorami na obrazach w muzeum, ale nawet przeprowadzić analizę rozkładu barw.
Dzięki systemowi projekt "Usłyszeć obraz" pozwala na wygenerowanie dźwięku odpowiedniego dla oznaczanego przez użytkownika koloru na cyfrowej reprezentacji obrazu. Mapowanie wskazania na rzeczywistą przestrzeń obrazu odbywa się poprzez sensor ruchu. - To pierwsze takie rozwiązanie, które pozwala osobom niewidomym „usłyszeć obraz”, bowiem dźwięki mają odwzorowywać barwy. W związku z czym, oglądając obraz można doznawać dodatkowych odczuć słuchowych. Jest to rozwiązanie adresowane zarówno dla osób, które widzą, jak i dla osób niedowidzących - opowiadał PAP dr Bednarski.

Aplikacja stworzona w ramach projektu przetwarza składowe poszczególnych kolorów według modelu HSV i w zależności od położenia aktualnego koloru w kole barw - emituje odpowiedni dźwięk.

Jak system działa w praktyce? Stojąc przed danym obrazem, użytkownik wskazuje dłonią jakiś punkt w jego obrębie. Dzięki wykorzystaniu sensora ruchu, który umieszczony jest nad obrazem, miejsce wskazywane przez użytkownika oznaczane jest czerwoną kropką na cyfrowej reprezentacji obrazu na monitorze. Mapowanie przestrzeni sensora ruchu na przestrzeń obrazu pozwala na orientację położenia kropki na oryginalnym obrazie. Wiedząc, jaki kolor odpowiada danemu dźwiękowi - użytkownik jest w stanie "usłyszeć obraz".

- Użytkownik wskazuje punkt na obrazie i kiedy porusza dłonią po przestrzeni obrazu, słyszy melodię, ponieważ każdy kolor, każdy piksel na obrazie ma przypisany odpowiedni dźwięk - wyjaśnił współtwórca systemu, doktorant w Instytucie, Damian Jóźwiak. Dzięki temu osoba z dysfunkcją wzroku może zapoznać się nie tylko z kolorami na obrazie, ale nawet przeprowadzić analizę rozkładu barw czy ich zmian.

System został przetestowany w łódzkim okręgu Polskiego Związku Niewidomych. Zdaniem Bednarskiego badane osoby odczytywały kolory z dokładnością ok. 80 proc.

Na razie projekt jest adresowany do placówek muzealnych, i choć dźwięk jest bardzo istotny w przekazie dla osób niedowidzących, to również innym odbiorcom system może dać możliwość nowego spojrzenia na sztukę - właśnie poprzez dźwięk.

System został zgłoszony do opatentowania. Jego pilotażowa instalacja wkrótce ma zostać zamontowana w Muzeum Miasta Łodzi.

Twórcy sytemu przekonują, że wrażenia z "usłyszenia obrazu" są na tyle fascynujące, że osoby w pełni widzące zapewne chętnie z tej aplikacji skorzystają, np. zamykając oczy i słuchając tylko dźwięku.

Zdaniem autorów jest wiele możliwości wykorzystania takiej aplikacji, np. w przedszkolach przy uczeniu dzieci kolorów bądź w parkach rozrywki. Można ją będzie także wykorzystać w konstrukcji okularów analizujących obraz i odtwarzających dźwięk, w zależności od widzianego koloru.

Źródło: PAP - Nauka w Polsce

Komentarze

Zauważ proszę, że komentarze krytyczne są jak najbardziej pożądane, zachęcamy do ich zamieszczania i dalszej dyskusji. Jednak komentarze obraźliwe, rasistowskie czy homofobiczne nie są przez nas akceptowane. Tego typu komentarze będą przez nas usuwane.
reklama
Załaduj więcej newsów
August 20 2018 15:56 V10.1.0-1