Vybrané metody sběru dat pro výzkum manažerského rozhodování v prostředí byznys simulačních her

Ing. Michal Prokop

Doctoral thesis

Selected Data Collection Methods for Research on Managerial Decision-Making in Business Simulation Games

Abstract:

Byznys simulační hry mohou nabízet vhodné experimentální prostředí ke studiu různých aspektů manažerského rozhodování. Zájem o jejich využívání k tomuto účelu je ale stále relativně nízký. Navíc, v odborné literatuře je jen velmi málo prostoru věnováno metodám sběru dat v kontextu jejich aplikace v rámci experimentů, při kterých je využíváno her. Přitom výběr vhodné metody patří k základním problémům, kterým musí výzkumní pracovníci čelit. Tato disertační práce se proto snaží přispět do této oblasti. Jejím cílem je porovnat vybrané metody sběru dat (verbální protokoly a eye-tracking) při jejich aplikaci ve výzkumu manažerského rozhodování v experimentálním prostředí byznys simulační hry. Porovnání je zaměřeno zejména na zhodnocení přínosů, limitů, výhod a nevýhod souběžného (CTA) a retrospektivního (RTA) přemýšlení nahlas; a na posouzení možností kombinace těchto metod s metodou eye trackingu. Teoretická část disertační práce uvádí přehled dosavadního poznání o využívání her v oblasti managementu; o manažerských kompetencích a rozhodování; a o metodách sběru dat používaných k výzkumu rozhodování. V empirické části byl potom proveden laboratorní experiment. Během něho hráli manažeři hru FactOrEasy®. Přitom byly shromažďovány informace o jejich rozhodování několika metodami sběru dat – pozorováním, záznamem průběhu hry do souborů Log File, eye trackingem, verbálními protokoly a strukturovaným rozhovorem. Na základě použití těchto metod a přezkoumání jimi poskytovaných dat bylo nejprve provedeno jejich kritické zhodnocení a porovnání. Hlavní pozornost přitom byla věnována právě verbálním protokolům a eye-trackingu. Na toto kvalitativní posouzení navázala kvantitativní analýza dat, která se již zaměřovala pouze na CTA a RTA. Tato analýza srovnává obě metody z pohledu pěti aspektů – dopadů metod na výkon účastníka při řešení experimentálního úkolu; vlivu na časovou náročnost experimentální seance; spolehlivosti a platnosti dat; struktury dat; a vlivu na data pořízená eye-trackingem. Identifikace rozdílů a souvislostí, které na ně mají vliv, potom umožnila dokončit popis přínosů, limitů, výhod a nevýhod těchto metod. Souhrn výsledků a poznatků této disertační práce tak může čtenáři nabídnout ucelený pohled na to, co lze od jejich aplikace očekávat.

Abstract:

Business simulation games may offer a suitable experimental environment to study different aspects of managerial decision-making. Interest in using them for this purpose is, however, still relatively low. Moreover, very little literature is devoted to data collection methods in the context of their application in experiments using games. Yet, choosing the appropriate method is one of the fundamental problems that researchers have to face. This dissertation therefore seeks to contribute to this area. Its aim is to compare selected data collection methods (verbal protocols and eye-tracking) when applied to research in managerial decision-making research in a business simulation game experimental setting. The comparison is aimed in particular at assessing the benefits, limitations, advantages and disadvantages of concurrent (CTA) and retrospective (RTA) think aloud, and at examining the possibilities of combining these methods with eye-tracking. The theoretical part of the dissertation provides an overview of the existing knowledge on the use of games in management; managerial competencies and decision making; and data collection methods used to research decision-making. The empirical part then involved a laboratory experiment. During the experiment, managers played a game called FactOrEasy®. In doing so, information about their decision-making was collected by several data collection methods – observation, recording the gameplay in Log Files, eye tracking, verbal protocols, and structured interviews. Based on these methods and a review of the data provided by them, a critical assessment and comparison was first made. The main focus was on verbal protocols and eye-tracking. This qualitative assessment was followed by a quantitative data analysis that already focused only on CTA and RTA. The analysis compares the two methods in terms of five aspects – the impact of the methods on the participant’s performance during the experimental task, the impact on experimental session time, the reliability and validity of the data, the structure of the data, and the impact on the data collected by eye-tracking. Identifying the differences and the context that affect them then made it possible to complete a description of the benefits, limitations, advantages and disadvantages of these methods. The summary of the results and findings of this dissertation can thus offer the reader a comprehensive view of what can be expected from their application.

Keywords

Byznys simulační hry, eye-tracking, kompetence, přemýšlení nahlas, rozhodování, vážné hry, verbální protokoly

Keywords

Business simulation games, eye-tracking, competencescompetences, think aloud, decision making, serious games, verbal protocols

Language used: Czech

Date on which the thesis was submitted / produced: 22. 10. 2021

Thesis defence

• Supervisor: prof. Ing. Ivana Tichá, Ph.D.
• Reader: Martina Fejfarová, doc. Ing., Ph.D., Ladislav Rolínek, Ing., externi, Pavel Žufan, externi

Czech University of Life Sciences Prague

Faculty of Economics and Management

Doctoral programme / field:
Economics and Management / Management