Master's Thesis
InfoHealth: um aplicativo para utilização da coleta ativa de dados no âmbito da mHealth
— 2024
Key information
Authors:
Supervisors:
Published in
May 14, 2024
Abstract
Este estudo desenvolveu um sistema de notificação inteligente, o aplicativo infoHealth, utilizando o algoritmo Q-Learning, para aprender os padrões de respostas dos usuários a questionários sobre Patient reported outcome measures (PROMs) enviados ao longo do tempo. O objetivo central foi o agente de Aprendizagem por Reforço (RL) definir os momentos oportunos para cada usuário receber uma notificação, contribuindo para a gestão de comorbidades, no âmbito da Saúde Móvel (mHealth). O experimento foi validado com pessoas entre 18 a 76 anos de idade, dentro do seu dia a dia e em ambientes reais, para que os resultados servissem como constatações fiáveis. Ademais, o aplicativo foi projetado para incluir o público idoso, por ser o que enfrenta maiores desafios em relação às comorbidades e necessita de autogerenciamento médico. Tendo um agente por utilizador, o agente de RL investigava as recompensas obtidas das interações dos usuários em ações realizadas em cada estado. Os estados considerados para aprendizagem do agente foram determinados por variáveis como localização, hora e dia da semana. Ao longo das 16 semanas, o agente aprendeu, no geral, o padrão de respostas dos usuários, ao diminuir o número de notificações enviadas a cada etapa do experimento. Além disto, constatou-se que os usuários que interagiam de forma regular com o aplicativo, foram fundamentais para o agente atingir bons resultados de aprendizagem. Logo, os resultados deste trabalho evidenciam padrões de aprendizagem aceitáveis e validam a importância do envolvimento dos usuários como um fator que impulsiona o aprendizado do agente infoHealth. This study developed an intelligent notification system, the infoHealth app, by using the reinforcement learning algorithm, Q-Learning, to learn user response patterns to Outcome Measures (Proms) questionnaires sent over time. The central objective was for the Reinforcement Learning (RL) agent to define the opportune moments for each user to receive a notification, contributing to the management of comorbidities, within the scope of Mobile Health (mHealth). The experiment was validated with real people and environments, so that the results served as reliable findings. Furthermore, the application was designed to include the elderly population, as they face the greatest challenges in relation to comorbidities and the need for medical self-management. The RL agent investigates the rewards obtained by user ́s interactions with the actions performed in each state. The states considered for agent learning were determined by variables such as location, time of day and day of the week. Over the 16 weeks, the RL algorithm agent showed that it learned, in general, the pattern of users’ responses, by reducing the number of notifications sent at each stage of the experiment. Furthermore, it was noted that users who interacted regularly with the application were essential for the agent to accelerate and achieve good learning results. Therefore, the results of this work demonstrate acceptable learning standards and validate the importance of user engagement as a factor that drives the learning of the infoHealth agent.
Publication details
Authors in the community:
Natan de Barros Viana
ist191615
Supervisors of this institution:
Plinio Moreno Lopez
ist31838
José Santos Victor
ist12760
Degree Name
Mestrado em Engenharia Eletrotécnica e de Computadores
Fields of Science and Technology (FOS)
electrical-engineering-electronic-engineering-information-engineering - Electrical engineering, electronic engineering, information engineering
Keywords
- mHealth
- PROMs
- Q-learning
- Reinforcement Learning
- Intelligent Notification System
- infoHealth
- Aprendizagem por Reforço
- Sistema de Notificação Inteligente
Publication language (ISO code)
por - Portuguese
Rights type:
Embargo lifted
Date available:
April 30, 2025
Institution name
Instituto Superior Técnico