Making charts accessible

Read full text Summarise with VIRAT
Authors: Roger Martínez Gilibets
Cited by: 0
References: 12

Summary

No summary yet. VIRAT can read this paper and write a plain-language summary of its aim, methods, key findings and limitations.

Summarise with VIRAT Free to try with your Science Catalogs account.

Abstract

El següent projecte es fonamenta en el desenvolupament i l'avaluació d'un sistema end-to-end per generar una frase (insight) que sintetitzi el missatge que es vol comunicar en un gràfic; concretament, en un subconjunt de tipologies (bar, grouped_bar, line, multi_line, pie, donut i scatter). L'objectiu s'emmarca en l'accessibilitat per a persones amb deficiència visual i, alhora, en la creació d'una eina útil per a l'anotació i revisió del contingut dels gràfics. L'arquitectura que sosté l'aplicatiu interactiu creat (adjuntar un gràfic, obtenir un insight, escoltar-lo i exportar el binomi gràfic+insight en PDF) es basa en dues rutes complementàries: la primera de les quals aplica un extractor estructural (model DePlot) seguit d'una verbalització mitjançant un LLM; mentre que la ruta secundària recorre a un model vision¿language quan l'extracció estructural no és prou fiable o aplicable, d'acord amb l'evidència observada experimentalment. L'avaluació es realitza majoritàriament amb dades sintètiques, així com amb un conjunt més reduït de gràfics reals (atenent a una manca de disponibilitat), posant l'èmfasi en prioritzar la fidelitat semàntica i la utilitat, més enllà de la precisió numèrica estricta. En aquest context, si bé una part significativa dels insights generats són precisos i directament aprofitables, d'altres presenten inconsistències derivades de l'extracció o de la generació. Aquesta variabilitat justifica l'enfocament human-in-the-loop adoptat: l'insight es concep com un esborrany revisable, on la supervisió humana valida la informació.

Fields of Study & Subjects

Data Visualization and Analytics Digital Accessibility for Disabilities Multimodal Machine Learning Applications

Publication details

Journal / source
UPCommons institutional repository (Universitat Politècnica de Catalunya)
Publication date
20 January 2026
Language
EN
Document type
Thesis