Il Computer Vision and Multimedia Lab (CVML) del Dipartimento di Ingegneria Industriale e dell’Informazione dell’Università di Pavia, in occasione di ABILITANDO “Dove la tecnologia incontra la disabilità”, venerdì 4 e sabato 5 ottobre 2019, presso il Complesso monumentale di Santa Croce in Bosco Marengo (AL), ha esposto le applicazioni realizzate per:
- Scrivere con gli occhi
- Suonare con gli occhi
- Ricostruire affreschi “pensando per immagini”
- Leggere dipinti con le dita
Le applicazioni sono state prodotte e testate dagli studenti del corso di laurea triennale in “Ingegneria Elettronica e Informatica” e del corso di laurea magistrale in “Computer Engineering”, con la supervisione dei docenti del laboratorio CVML, guidato dal prof. Virginio Cantoni.
1) Una postazione era dedicata ad Eye-S, un sistema per fornire input al computer tramite gesti oculari. Questo approccio, basato solo sullo sguardo, utilizza l’eye tracker, un dispositivo che misura la posizione e il movimento degli occhi. In particolare, sfruttando il concetto di “gesto oculare”, l’utente crea le lettere dell’alfabeto e i segni di punteggiatura osservando in sequenza alcune aree sensibili sullo schermo. Tali aree, rettangolari, sono posizionate al centro, ai quattro vertici e nel punto medio di ciascun lato. Un vantaggio di Eye-S rispetto ad altre soluzioni di scrittura oculare è il fatto che le aree sensibili sono mostrate in semitrasparenza (e potrebbero anche essere nascoste), lasciando quindi lo schermo libero per la visualizzazione di qualsiasi altro contenuto. Eye-S è concepito per gli utenti che non possono muovere le mani e quindi necessitano di metodi di input alternativi a quelli basati su tastiera e mouse.
2) Una seconda postazione era dedicata a Netytar, uno strumento musicale digitale virtuale (Virtual DMI) completo, appositamente progettato per essere suonato senza mani. Utilizzando l’eye tracker, il musicista può selezionare una nota, che sarà poi eseguita mediante un sensore a fiato o il movimento della testa. Netytar è progettato per l’accessibilità, in particolare per persone che non hanno controllo sui movimenti delle proprie mani e che quindi non potrebbero suonare uno strumento musicale tradizionale. È uno strumento monofonico completo, paragonabile a un flauto o un sassofono.
3) Una terza postazione era dedicata a Javastylosis, un’applicazione sviluppata per consentire a persone che “pensano per immagini” – condizione di «visual thinking» relativamente diffusa all’interno dello spettro autistico – di spostare le immagini dei frammenti di affreschi andati distrutti, per ricostruire virtualmente l’affresco. Il software associa agli spostamenti una tabella con le coordinate della posizione finale e l’angolo di rotazione applicato ad ogni frammento, dati utili al restauratore nella fase concreta di ricostruzione dell’affresco.
4) Era esposta anche una prova di stampa di una didascalia tattile realizzata per il dipinto “Cristo e la Samaritana” di Annibale Carracci, il cui prodotto finale è esposto, accanto al capolavoro originale, alla Pinacoteca di Brera di Milano. Una didascalia tattile è una riproduzione 3D di un’immagine bidimensionale, rappresentata in rilievo per poter essere letta con la punta delle dita. Il procedimento applicato prevede la digitalizzazione dell’immagine originale, la segmentazione e la semplificazione atte a renderla riproducibile in rilievo con forme distinte e logicamente omogenee. Ogni componente, a cui viene associato un carattere Braille, deve risultare facilmente identificabile e in grado di veicolare i contenuti originari in maniera intelligibile. La legenda e una breve frase esplicativa in Braille completano l’immagine 3D predisposta per un’interpretazione tattile.
Una documentazione sulla manifestazione, quest’anno veramente esplosa, ricca di foto, video e informazioni aggiuntive è disponibile all’indirizzo: https://vision.unipv.it/events/Abilitando-2019.html.
Stand CVML – Università di Pavia ad Abilitando 2019:
