Bienvenue sur la page d'IMAGE (Accès multimodale a l’exploration de graphiques internet). Ce projet est réalisé par le Laboratoire de réalité partagée de l'Université McGill (SRL), en partenariat stratégique avec Gateway Navigation CCC Ltd et le Conseil canadien des aveugles (CCB). Le projet est financé par Innovation Science Economic Développement Canada par le biais de la Technologie d'assistance Programme. La motivation de ce projet est d'améliorer l'accès aux graphiques Internet pour les personnes aveugles ou malvoyantes.
Sur Internet, du matériel graphique tel que des cartes, des photographies et des graphiques qui représentent des informations numériques, sont clairs et directs pour ceux qui peuvent le voir. Pour les personnes déficientes visuelles, ce n'est pas le cas. Le rendu des informations graphiques est souvent limité aux étiquettes HTML de texte alternatif générées manuellement, souvent abrégé et peu riche. Cela représente une solution meilleure que rien, mais reste largement insuffisante. La technologie de l'intelligence artificielle (IA) peut améliorer la situation, mais les solutions existantes ne sont pas interactives, et fournir au mieux un résumé minimal, sans offrir une compréhension cognitive du contenu, comme points d'intérêt dans une carte, ou la relation entre les éléments d'un diagramme schématique. Ainsi, les informations essentielles décrites par le graphique restent fréquemment inaccessibles.
Nous utilisons un son riche (sonification) avec le sens du toucher (haptique) pour fournir un expérience graphique plus rapide et plus nuancée sur le Web. Par exemple, en utilisant l'audio spatial, où l'utilisateur expérimente le son se déplaçant autour de lui à travers son casque, les informations sur les relations spatiales entre les divers objets de la scène peuvent être rapidement transmis sans lire de longues descriptions. De plus, plutôt que des expériences passives d'écoute audio, nous permettons à l'utilisateur d'explorer activement une photographie soit en pointant vers différentes parties et en entendant parler de son contenu ou de ses nuances, soit en utilisant une coutume dispositif haptique pour ressentir littéralement des aspects comme la texture ou les régions. Cela permettra d'interpréter des cartes, des dessins, des diagrammes et des photographies, dans lesquels l'expérience visuelle est remplacé par un retour sensoriel multimodal, rendu d'une manière qui aide à surmonter les barrières d'accès pour utilisateurs aveugles, sourds-aveugles ou malvoyants.
La collaboration avec la communauté est essentielle lors de la création d'une technologie accessible. Notre équipe travaille en partenariat avec Gateway Navigation CCC Ltd et le Conseil canadien des aveugles (CCB), une organisation de consommateurs de Canadiens aveugles, pour s'assurer que notre système est en adéquation avec les besoins de la communauté. Nous sommes en contact régulier avec les membres de la communauté dans le cadre de notre approche de co-conception, qui aident à guider le processus de développement, mais il y a toujours de la place pour plus de voix. Si vous souhaitez contribuer au projet, nous vous invitons à remplir notre sondage communautaire.
Notre projet est conçu pour être aussi librement disponible que possible, ainsi qu'extensible afin que les artistes, les technologues, voire les entreprises peuvent produire de nouvelles expériences pour un contenu graphique spécifique qu'ils savent comment rendre. Si quelqu'un a une façon spéciale de rendre des photos de chats, il n'a pas à réinventer la roue, mais peut créer un module qui se concentre sur leur rendu audio et haptique spécifique, et le branchez à notre système global.