Evaluation of the usability in a neonatal health information system through the user’s perception, using the system usability scale tool

Objectives: To measure the degree of satisfaction regarding the usability of a multicenter neonatal Health Information System (HIS), using the System Usability Scale (SUS) instrument. Identify if demographic factors can influence the evaluation, through SUS, of the perception of the usability of a HIS. Methods: A cross-sectional, exploratory study was carried out with a sample of convenience with 67 users of the Brazilian Neonatal Research Network (RBPN). All health professionals from the 20 RBPN centers and coordination, who had access to the electronic system, were invited to participate in the study, regardless of the time of use of the system. The instrument chosen for usability evaluation was the System Usability Scale, composed of ten questions, on a likert scale, and a non-obligatory dissertative question. In addition, to characterize the sample, demographic data were collected from the participants (age, sex, education, profession, area of activity, level of computer knowledge and time of use of the system). For this purpose, an instrument was developed using the REDCap electronic data capture tool, was made available for access during two months (between February and March 2017). The descriptive and inferential statistical analysis of the collected variables was carried out in order to describe the sample, to quantify the degree of satisfaction of the users and to identify the variables associated with the degree of satisfaction of the user in relation to usability. Results: The response rate was 75.8%, corresponding to 50 participants. The female sex represented 72% of the sample. The mean age was 52.8 years (standard deviation = 9.7), 58% had a doctorate degree, average time of graduation of 17 years, with area of practice in medicine (neonatology) with intermediate knowledge in computer science (74%) And mean system use time of 52 months. Regarding usability, 94% rated the system as "good", "excellent" or "best impossible". The usability of the system was not associated with age, sex, education, profession, area of activity, level of computer knowledge and time of use of the system. Conclusions: The System Usability Scale (SUS) instrument was easily applicable for assessing the satisfaction of the healthcare user regarding the use of a computerized system. Due to the number of questions, reliability, score interpretation, ease of deployment and online distribution, this tool can be used as a quick usability assessment.Objetivos: Mensurar o grau de satisfação quanto à usabilidade de um Sistema de Informação em Saúde (SIS) neonatal multicêntrico, utilizando o instrumento System Usability Scale (SUS). Identificar se fatores demográficos podem influenciar na avaliação, por meio do SUS, da percepção da usabilidade de um SIS. Métodos: Estudo transversal, exploratório, realizado uma amostra de conveniência com 67 usuários do sistema da Brasileira de Pesquisas Neonatais (RBPN). Todos os profissionais de saúde integrantes dos 20 centros da RBPN e da coordenação, que tinham acesso ao sistema eletrônico, foram convidados a participar do estudo, independente do tempo de utilização. O instrumento escolhido para avaliação da usabilidade foi o System Usability Scale, composto por dez questões, em escala likert, e uma questão dissertativa não obrigatória. Além disso, para caracterização da amostra, foram coletados dados demográficos dos participantes (idade, sexo, escolaridade, profissão, área de atuação, nível de conhecimento em informática e tempo de uso do sistema) Para a coleta de dados foi usado formulário eletrônico, construído para este fim, na ferramenta de captura de dados eletrônica REDCap, disponível para acesso por dois meses (fevereiro a março de 2017). Realizou-se a análise estatística descritiva e inferencial das variáveis coletadas, com a finalidade de descrever a amostra, quantificar o grau de satisfação dos usuários e identificar as variáveis associadas ao grau de satisfação do usuário em relação à usabilidade. Resultados: A taxa de resposta foi de 75,8%, correspondendo a 50 participantes. O sexo feminino representou 72% da amostra. A idade média foi de 52,8 anos (desviopadrão= 9,7), 58% com doutorado, tempo médio de formação de 17 anos, tendo como área de atuação a medicina (neonatologia) com conhecimentos intermediários em informática (74%) e tempo de utilização média do sistema de 52 meses. Quanto à usabilidade, 94% avaliaram o sistema como "bom", "excelente" ou "melhor impossível". A usabilidade do sistema não foi associada à idade, sexo, escolaridade, profissão, área de atuação, nível de conhecimento em informática e tempo de uso do sistema. Conclusões: O instrumento System Usability Scale (SUS) mostrou-se facilmente aplicável para avaliação da satisfação do usuário da área da saúde em relação ao uso de um sistema informatizado. Pelo número de questões, a xv confiabilidade, a interpretação do escore, a facilidade de implantação e distribuição online, pode ser usado como uma avaliação rápida da usabilidade.Dados abertos - Sucupira - Teses e dissertações (2017

EVALUATION OF USABILITY OF A NEONATAL HEALTH INFORMATION SYSTEM ACCORDING TO THE USER’S PERCEPTION

ABSTRACT Objective: To measure the level of satisfaction regarding the usability of a neonatal health information system and identify if demographic factors can influence the usability of a health information system. Methods: A cross-sectional, exploratory study was carried out with a convenience sample of 50 users of the Brazilian Neonatal Research Network. The instrument chosen for the usability evaluation was the System Usability Scale between February and March 2017. The statistical analysis of the collected variables was carried out in order to describe the sample, to quantify the level of satisfaction of the users and to identify the variables associated with the level of satisfaction. Results: The female gender represented 75% of the sample. The mean age was 52.8 years; 58% had a doctoral degree, average time of graduation was 17 years, with area of practice in medicine (neonatology), with intermediate knowledge in computer science (74%) and mean system use time of 52 months. Regarding usability, 94% rated the system as “good”, “excellent” or “better than imaginable”. The usability of the system was not associated with age, gender, education, profession, area of practice, knowledge in computer science and time of system use. Conclusion: The level of satisfaction of the computerized health system user was considered good. No demographic factors were associated with the satisfaction of the users