Le défi
Sur Internet, les matériel graphiques tels que des cartes, des photos et des graphiques qui représentent des informations numériques, sont clairs et directs pour ceux qui peuvent le voir. Pour les personnes déficientes visuelles, ce n'est pas le cas. Le rendu des informations graphiques est souvent limité aux étiquettes HTML de texte alternatif générées manuellement, souvent abrégé et peu riche. Cela représente une solution meilleure que rien, mais reste largement insuffisante. La technologie de l'intelligence artificielle (IA) peut améliorer la situation, mais les solutions existantes ne sont pas interactives, et fournissent au mieux un résumé minimal, sans offrir une compréhension cognitive du contenu, comme points d'intérêt dans une carte, ou la relation entre les éléments d'un diagramme schématique. Ainsi, les informations essentielles décrites par le graphique restent fréquemment inaccessibles.
Notre stratégie
Nous utilisons un son riche (sonification) avec le sens du toucher (haptique) pour fournir une expérience graphique plus rapide et plus nuancée sur le Web. Par exemple, en utilisant l'audio spatial, où l'utilisateur découvre le son qui se déplace autour de lui à travers ses écouteurs, les informations sur les relations spatiales entre les divers objets de la scène peuvent être rapidement transmises sans lire de longues descriptions. De plus, plutôt que des expériences passives audio, nous permettons à l'utilisateur d'explorer activement une photo soit en pointant vers différentes parties de l'image pour ensuite recevoir des sons contenus ou de ses nuances avec l'aide d'un dispositif, haptique pour ressentir littéralement des aspects comme la texture ou les régions. Cela permettra d'interpréter des cartes, des dessins, des diagrammes et des photos, dans lesquels l'expérience visuelle est remplacé par un retour sensoriel multimodal, rendu d'une manière qui aide à surmonter les barrières d'accès pour utilisateurs aveugles, sourds-aveugles ou malvoyants.
Engager la communauté
La collaboration avec la communauté est essentielle lors de la création d'une technologie accessible. Notre équipe travaille en partenariat avec Gateway Navigation CCC Ltd et le Conseil canadien des aveugles (CCB), une organisation de consommateurs de Canadiens aveugles, pour s'assurer que notre système est en adéquation avec les besoins de la communauté. Nous sommes en contact régulier avec les membres de la communauté dans le cadre de notre approche de co-conception, qui aident à guider le processus de développement, mais il y a toujours de la place pour plus de voix. Si vous souhaitez contribuer au projet, nous vous invitons à remplir notre sondage communautaire.
Notre technologie
Notre projet est conçu pour être aussi librement disponible que possible, ainsi qu'extensible afin que les artistes, les technologues, ou même des entreprises puissent produire de nouvelles expériences pour un contenu graphique spécifique qu'ils savent comment rendre. Si quelqu'un a une façon spéciale de rendre des photos de chats, il n'a pas à réinventer la roue, mais peut créer un module qui se concentre sur leur rendu audio et haptique spécifique, et le brancher à notre système global.
Nous rejoindre
Pour toute information relative au projet, vous pouvez contacter image@cim.mcgill.ca.Financement et partenariats
2021-2022 Innovation Science Economic Développement Canada, Technologie d'assistance Programme
2022 Healthy Brains, Healthy Lives, Ignite Neuro Commercialization Grant
2022-2023 Healthy Brains, Healthy Lives, Accelerate Neuro Commercialization Grant, en partenariat avec: Robotiques Haply
2023 Humanware/The American Printing House d'entreprise