Bridges and misunderstandings: at the intersection of art, design and science, through the parallel sonification of textual data of a work in two languages

Bc. Marek Štvrtňa

Master's thesis

Abstract:

Tato magisterská závěrečná práce se zaměřuje na problematiku sonifikace textových dat. Popisujeme zde konstrukci experimentálního nástroje skrze design research metodologii, přičemž pomocí tohoto nástroje aplikujeme sonifikační metodu earkonů, audifikace a sonifikace mapováním parametrů na dva textové datasety. Tyto datasety jsou sonifikované paralelně jako souběžná sonifikace. Skrze tzv. screwmeneutics přístup aplikujeme sonifikační metodu na rozložení písmen, analýzu sentimentu a fonosémantiku. Taktéž použijeme sonifikaci jakožto teoretický objekt. Na základě pozitivních výsledků i potenciálu navrhujeme zasadit nástroj do prostředí laboratoře digitálních humanitních věd a provést sérii experimentů.

Abstract:

This thesis is focused on the problem of text data sonification. We describe the construction of an experimental tool through design research methodology. This tool applies the sonification methods of earcons, audification, and parameter mapping sonification to two text datasets. These datasets are then sonified in parallel as a concurrent sonification. Taking a screwmeneutic attitude, we apply the sonification method for letters, sentiment analysis, and phonosemantics. We use sonification as a theoretical object too. Based on the overall positive outcome and discussed potential, we suggest setting up the tool in the digital humanities lab and conducting a series of experiments for further research.

Keywords

Okularcentrismus, Sonifikace, Paralelní sonifikace, Analýza sentimentu, Fonosémantika, Informační věda, Digitální humanitní vědy, Textová data, Earcony, Audifikace, Sonifikace mapováním parametrů, Ocularcentrism, Sonification, Concurrent sonification, Sentiment analysis, Phonosemantics, Information science, Digital humanities, Text data, Earcons, Audification, Parameter mapping sonification

Language used: English

Date on which the thesis was submitted / produced: 21. 6. 2024

Thesis defence

• Date of defence: 29. 8. 2024
• Supervisor: PhDr. Michal Lorenz, Ph.D.
• Reader: PhDr. Ladislava Zbiejczuk Suchá, Ph.D.

Masaryk University

Faculty of Arts

Master programme / field:
Information and Library Studies / Information and Library Studies