Personal Life Management System with Screen Activity Monitoring and AI Agents

Bc. Matúš Martiška

Master's thesis

Abstract:

Správa osobného života je často rozdelená medzi viacero rôznych aplikácií. Užívatelia sledujú svoje financie v jednom nástroji, fyzickú aktivitu v druhom, úlohy a projekty inde a poznámky k štúdiu ešte na ďalšom mieste. Keď sa neskôr opýtajú AI o radu, musia mu znova vysvetľovať relevantný kontext, pričom jednotlivé aplikácie nedokážu uvažovať o živote užívateľa ako o jednom celku. Táto práca sa sústredí na dizajn a implementáciu aplikácie Anima, natívnej macOS aplikácie na správu osobného života so sledovaním aktivity obrazovky a AI agentmi. Systém spája päť oblastí života: Zdravie, Osobný život, Vzdelávanie, Projekty a Financie. Kombinuje lokálne ukladanie dát, automatické sledovanie aktivity, časovú os dňa, týždenné plánovanie a agentov v jednotlivých oblastiach, ktorí aplikujú zavedené metodológie pre danú oblasť života na užívateľov vybraný kontext a poskytujú tak odporúčania. Každá oblasť má svoj vlastný dátový model, dashboard, perzistentnú vrstvu a nástroje. Tieto nástroje sú dostupné cez zdieľanú vrstvu, takže chatové rozhranie aj úlohy bežiace na pozadí môžu žiadať o akcie cez rovnaký kontrolovaný mechanizmus. Štruktúrované aplikačné dáta sú uložené v lokálnej šifrovanej SQLite databáze, zatiaľ čo snímky obrazovky zostávajú lokálnymi súbormi. Spracovanie AI využíva nainštalovaných CLI poskytovateľov autentifikovaných cez užívateľove vlastné predplatné. Výsledkom práce je funkčná local-first macOS aplikácia, ktorá ukazuje, ako môžu byť osobné dáta, sledovanie aktivity, plánovanie a kontrolované používanie AI nástrojov skombinované v jednom systéme.

Abstract:

Personal life management is often split across many separate applications. Users track their finances in one tool, physical activity in another, tasks and projects elsewhere, and study notes in yet another place. When they later ask a large language model for advice, they have to explain the relevant context again, while the individual applications cannot reason about the user's life as a whole. This thesis focuses on the design and implementation of Anima, a native macOS application for personal life management with screen activity monitoring and AI agents. The system brings together five life domains: Health, Personal, Education, Projects and Finance. It combines local data storage, automatic activity tracking, a daily timeline, weekly planning and domain agents that apply established life-management methodologies to the user's selected context to provide grounded guidance. Each domain has its own data model, dashboard, persistence layer and tools. These tools are exposed through a shared layer, so both the chat interface and background jobs can request actions through the same controlled mechanism. Structured application data is stored in an encrypted local SQLite database, while short-lived screenshot captures remain local files. AI processing uses installed CLI providers authenticated through the user's own subscriptions. The result of the thesis is a working local-first macOS application that shows one way to combine personal data, activity tracking, planning and controlled AI tool use in one system.

Keywords

AI agents, large language models, personal life management, screen activity monitoring, macOS, local-first software, tool calling

Language used: English

Date on which the thesis was submitted / produced: 19. 5. 2026

Thesis defence

• Date of defence: 19. 6. 2026
• Supervisor: Ing. Lukáš Grolig
• Reader: Mgr. Vít Marša, Ph.D.

Masaryk University

Faculty of Informatics

Master programme / field:
Software Engineering / Design and development of software systems