ARGIRA B_v9 – A spectro‑temporal analysis of sonified visual art across 72 artworks

Read full text
Authors: Jose Ranero García
Cited by: 1

Abstract

[EN] Note: This is a preprint. It has not been peer‑reviewed. This paper describes a spectro‑temporal analysis of the ARGIRA B_v9 sonification pipeline applied to 72 public‑domain artworks (32 artists). Each artwork was evaluated across 6 logarithmic spectral bands and 5 playback‑rate conditions (from 0.25× to 1.50×), resulting in 2,160 band‑rate observations. Observed phenomenon In the 4–8 kHz band, a change in correlation sign was observed as playback rate increased: · At 0.25×, Spearman ρ = +0.973· At 0.50×, Spearman ρ = −0.042· Above 0.50×, ρ stabilised around −0.22 No other band showed a sign inversion across the full velocity range. Low‑frequency bands (125–500 Hz) maintained a stable negative correlation at all velocities. Robustness checks performed Four tests were carried out: 1. Ordinal metric invariance (no sign disagreements between Spearman and Kendall τ across 36 band‑rate pairs)2. Spectral re‑binning (transition preserved in all 4 band variants)3. Influence diagnostics (jackknife 100% support, maximum Cook’s D = 0.100)4. Velocity axis reparametrisation (transition preserved under 4 monotone transforms; a non‑monotone transform destroyed it) Independent cross‑validation (Aliasing dataset, n=10) showed that hue_std predicted residual spectral roughness with r = 0.8477 through a mathematically independent path. This is consistent with the idea that the chromatic–acoustic correspondence may be a property of the image rather than only of the algorithm, but this interpretation remains tentative. Limitations (to be kept in mind) · Single corpus (Western paintings only)· Only one sonification pipeline family tested· No perceptual validation with human listeners· The observed regime transition is specific to the tested conditions and may not generalise· Preprint status: not peer‑reviewed Files included · Argira_PostICAD2026_Bv9_v1.pdf – main paper· Four HTML interactive test files (test1 to test6)· Additional supporting files Related DOIs · Dataset (B_v9, 72 works): 10.5281/zenodo.20258314· Argira software v15: 10.5281/zenodo.20113356· ICAD 2026 baseline paper: 10.5281/zenodo.20123821· Aliasing dataset v2: 10.5281/zenodo.20252194 License note The intended license for this work is CC BY‑NC 4.0 (Creative Commons Attribution‑NonCommercial 4.0 International), as stated in the PDF and related documentation. Due to a Zenodo metadata issue (May 13‑15 incident), the record may incorrectly display a different license. Author: Jose Ranero García · ORCID: 0009-0009-3168-6379 --- [ES] Nota: Este es un preprint. No ha sido revisado por pares. Este artículo describe un análisis espectro‑temporal del pipeline de sonificación ARGIRA B_v9 aplicado a 72 obras de dominio público (32 artistas). Cada obra fue evaluada en 6 bandas espectrales logarítmicas y 5 condiciones de velocidad (de 0,25× a 1,50×), generando 2.160 observaciones banda‑velocidad. Fenómeno observado En la banda de 4–8 kHz se observó un cambio de signo de la correlación al aumentar la velocidad: · A 0,25×, Spearman ρ = +0,973· A 0,50×, Spearman ρ = −0,042· Por encima de 0,50×, ρ se estabilizó alrededor de −0,22 Ninguna otra banda mostró inversión de signo en todo el rango de velocidades. Las bandas bajas (125–500 Hz) mantuvieron una correlación negativa estable en todas las velocidades. Pruebas de robustez realizadas Se realizaron cuatro pruebas: 1. Invariancia de métrica ordinal (sin discrepancias de signo entre Spearman y Kendall τ en 36 pares banda‑velocidad)2. Re‑agrupamiento espectral (transición preservada en las 4 variantes de banda)3. Diagnósticos de influencia (jackknife 100% de apoyo, Cook’s D máximo = 0,100)4. Reparametrización del eje de velocidad (transición preservada bajo 4 transformaciones monótonas; una transformación no monótona la destruyó) Validación cruzada independiente (dataset Aliasing, n=10) mostró que hue_std predijo la rugosidad espectral residual con r = 0,8477 a través de una vía matemáticamente independiente. Esto es consistente con la idea de que la correspondencia cromático‑acústica podría ser una propiedad de la imagen más que solo del algoritmo, pero esta interpretación sigue siendo tentativa. Limitaciones (a tener en cuenta) · Corpus único (solo pintura occidental)· Solo se probó una familia de pipelines de sonificación· Sin validación perceptiva con oyentes humanos· La transición de régimen observada es específica de las condiciones testadas y podría no generalizarse· Estado de preprint: no revisado por pares Archivos incluidos · Argira_PostICAD2026_Bv9_v1.pdf – artículo principal· Cuatro archivos HTML interactivos de prueba (test1 a test6)· Archivos adicionales de soporte DOIs relacionados · Dataset (B_v9, 72 obras): 10.5281/zenodo.20258314· Software Argira v15: 10.5281/zenodo.20113356· Artículo base ICAD 2026: 10.5281/zenodo.20123821· Dataset Aliasing v2: 10.5281/zenodo.20252194 Nota sobre la licencia La licencia prevista para este trabajo es CC BY‑NC 4.0 (Creative Commons Attribution‑NonCommercial 4.0 International), tal como se indica en el PDF y la documentación relacionada. Debido a un problema de metadatos de Zenodo (incidente del 13‑15 de mayo), el registro podría mostrar incorrectamente otra licencia. Autor: Jose Ranero García · ORCID: 0009-0009-3168-6379

Fields of Study & Subjects

Music Technology and Sound Studies Multisensory perception and integration Tactile and Sensory Interactions

Publication details

Journal / source
Zenodo (CERN European Organization for Nuclear Research)
Publication date
18 May 2026
Document type
Preprint