An Exploration of Using Japanese Onomatopoeia for Sound Visualization in Museum Environments to Improve Sound Awareness and Sound Comprehension

Abstract: Ökad tillgång till teknik som augmented reality (AR) ger museer möjlighet att utforska alternativa interaktioner för utbildning och ökad tillgänglighet. Den här studien utforskar visualisering av miljöljud på museer i syfte att öka ljudmedvetenhet och förbättra museiupplevelsen. Visualiseringendesignen som utforskas i denna studie använder japansk onomatopoeia som basis. Ett proof-of-concept i form av en virtuell museimiljö skapades i virtual reality (VR). Fyra ljudkällor placerades i miljön och visualiserades. Sju deltagare (6 modersmålstalare, 1 med flytande Japanska) utforskade VR-museet och gav feedback genom ett frågeformulär. Resultaten indikerar ett uttryckt stöd för ljudvisualisering i museimiljöer. Vidare föreslår resultaten att visualiseringen bidrar till att underlätta ljudmedvetenhet samt lokalisering av ljud men inte nödvändigtvis ljudförståelse. Vidare är användandet av onomatopoeia lovande men begränsat.