Practical Use of Prompt/Context Engineering Tools and Methods

Bc. Emma Tomášová

Bakalářská práce

Anotace:

Táto bakalárska práca hodnotila, ako môžu metódy prompt a context engineeringu merateľne zlepšiť kvalitu odpovedí jazykových modelov. Práca zahŕňala prehľad týchto metód, experimenty s vybranými jazykovými modelmi a porovnanie ich odpovedí na rôzne prompty. Jedna z experimentálnych úloh bola realizovaná v praktickom prostredí, ktoré kombinuje deterministický automatizačný systém s nedeterministickým veľkým jazykovým modelom (LLM) na ovládanie webovej aplikácie. Deterministickou zložkou tohto systému je YSoft AIVA. Táto práca sa sústredila na interakciu s jazykovými modelmi prostredníctvom promptov a na ich praktické využitie, nie na detailnú architektúru jazykových modelov. Výsledkom práce bola demonštrácia, že správne použitie prompt a context engineeringu zlepšuje výkonnosť LLM. Hoci jazykové modely môžu byť, a v niektorých prípadoch už aj sú, nasadené v produkčnom prostredí, v súčasnosti stále predstavujú významné riziká z hľadiska spoľahlivosti a bezpečnosti.

Abstract:

This thesis evaluated how prompt and context engineering methods can measurably improve the quality of language model responses. The work included an overview of these methods, experiments with selected language models, and a comparison of their responses to different prompts. One of the experimental tasks was conducted in a practical setup that combined a deterministic automation system with a non-deterministic Large Language Model (LLM) to operate a web application. The deterministic component of the system was YSoft AIVA. The thesis focused on the prompt interactions with language models and their practical use, rather than on their internal architecture. The result of this thesis was the demonstration that the proper use of prompt and context engineering methods improves the performance of LLMs. Although language models can be, and in many cases already are, used in production, they currently pose significant reliability and safety risks.

Keywords

LLM, SLM, Prompt Engineering, Context Engineering, Hallucination, Evaluation of LLMs, YSoft AIVA

Jazyk práce: angličtina

Datum vytvoření / odevzdání či podání práce: 21. 5. 2026

Obhajoba závěrečné práce

• Obhajoba proběhla 26. 6. 2026
• Vedoucí: RNDr. Ondřej Krajíček
• Oponent: doc. RNDr. Petr Švenda, Ph.D.

Masarykova univerzita

Fakulta informatiky

Bakalářský studijní program / obor:
Informatika / Informatika