BeingCare: a virtual communication window for wellbeing

Abstract

The powerful growth of technology granted users to take advantage of their resources in several areas such as health, education, politics, and others. However, human interaction continues poses several challenges, not only in isolation or care support scenarios, but also with human temporary constraints (inability to speak or move), even with the resource of technology. The BeingCare system - a proof-of-concept system based on Flutter – is a virtual window helping surpass communications constraints raised in wellbeing-related scenarios where direct interaction between the humans involved may be hindered. BeingCare was developed in Dart (backend) and Flutter (mobile and web front ends) and successfully deployed in iOS and Android with minor platform specific adaptions. Flutter enabled an easy integration of audio acquisition, processing, and classification. Edge computing approach for the audio classification was successfully addressed by using Tensorflow Lite, which grants local processing without the need of external services and any audio data exchange - enforcing the privacy and personal information data exchange in line with RGPD rules and mindset. Although not initially planned, the BeingCare back office was based entirely on the Dart language suggesting its adequacy to scopes beyond web/mobile using Flutter.

O crescimento tecnológico permitiu aos utilizadores tirarem partido dos seus recursos em diversas áreas como a saúde, educação, política, entre outras. Contudo, a interação humana continua a apresentar alguns desafios, não só em cenários de isolamento e prestação de cuidados básicos, mas também em restrições temporárias humanas (incapacidade de falar ou mover), mesmo recorrendo à tecnologia. O sistema BeingCare – uma prova de conceito baseada em Flutter – é uma janela virtual que ajuda a superar restrições de comunicação levantadas em cenários relacionados com o bem-estar, onde a interação direta entre humanos envolvidos pode ser prejudicada. O sistema BeingCare foi desenvolvido em Dart (backend) e Flutter (frontend) tendo sido implantado com sucesso em iOS e Android com pequenas adaptações específicas da plataforma. A exploração da abordagem de edge computing para a classificação de áudio foi bem sucedida com o uso do Tensorflow Lite, que concede processamento local sem a necessidade de serviços externos e qualquer troca de dados de áudio – reforçando a privacidade e a troca de informações pessoais de acordo com as regras e mentalidade do RGPD. Embora inicialmente não planeado, o brackground do BeingCare foi inteiramente desenvolvido na linguagem Dart, sugerindo a sua adequação a alcances para além da web e do mobile em Flutter.