An acoustic interface for simple binary image presentation

Abstract

Wśród metod alternatywnej komunikacji człowieka z komputerem przystosowanych do specyficznych uwarunkowań użytkowników niewidomych znaczącą rolę odgrywają interfejsy akustyczne. Zasadnicze zastosowania tych interfejsów dotyczą odtwarzania tekstu, dużo słabiej rozwinięte są jednak techniki prezentacji obrazów. Uwzględniając ograniczenia ludzkiego zmysłu słuchu, związane z przepustowością kanału informacyjnego i liniowym charakterem percepcji, można zaproponować metodę akustycznej prezentacji obrazu omijającą te ograniczenia przez wprowadzenie interakcji z użytkownikiem. W proponowanym interfejsie człowiek sam decyduje, w jakiej sekwencji i z jaką prędkością poszczególne fragmenty obrazu zostaną zamienione na dźwięk. Opisana w pracy metoda została wykorzystana do stworzenia interfejsu ograniczonego początkowo do obrazów binarnych, a przeprowadzone próby wskazują na możliwości jej dalszego rozwoju. Acoustic interfaces are prominent methods of human-computer interaction used widely in applications dedicated to blind people. The main purpose for most implementations is rendering text using synthesized speech. Image-to-sound presentation techniques are less developed due to limitations in information bandwidth of human auditory sense and linearity of sound perception. To overcome these limitations an interactive method of aural image presentation is proposed. With the use of pointing device the user is able to decide which areas of image will be converted to sound and to determine the sequence and speed of this process. Proposed method was used to build a sample system limited to black and white images. Performed tests indicate possibilities of further development of this method.