Creating Interaction Scenarios With a New Graphical User Interface

The field of human-centered computing has known a major progress these past few years. It is admitted that this field is multidisciplinary and that the human is the core of the system. It shows two matters of concern: multidisciplinary and human. The first one reveals that each discipline plays an important role in the global research and that the collaboration between everyone is needed. The second one explains that a growing number of researches aims at making the human commitment degree increase by giving him/her a decisive role in the human-machine interaction. This paper focuses on these both concerns and presents MICE (Machines Interaction Control in their Environment) which is a system where the human is the one who makes the decisions to manage the interaction with the machines. In an ambient context, the human can decide of objects actions by creating interaction scenarios with a new visual programming language: scenL.Comment: 5th International Workshop on Intelligent Interfaces for Human-Computer Interaction, Palerme : Italy (2012

Improving personalized elderly care: an approach using cognitive agents to better assist elderly people

Tesis por compendio de publicaciones[ES]El envejecimiento de la población a nivel global es una constante cada vez más presente en el día a día y las consecuencias derivadas de este problema son cada vez más impactantes para el correcto funcionamiento y estructuración de la sociedad. En este contexto, hablamos de consecuencias a nivel de crecimiento económico, estilos de vida (y jubilación), relaciones familiares, recursos disponibles por el gobierno a la franja etaria más anciana e inevitablemente la prevalencia de enfermedades crónicas. Es ante esta realidad que surge la necesidad de desarrollo y promoción de estrategias eficaces en el acompañamiento, prevención y estímulo al envejecimiento activo y saludable de la población para garantizar que las personas ancianas continúen teniendo un papel relevante en la sociedad en lugar de someterse al aislamiento y fácil deterioro de las capacidades físicas, cognitivas, emocionales y sociales. De esta forma, tiene todo el sentido aprovechar todos los desarrollos tecnológicos verificados en los últimos años, principalmente en lo que se refiere a avances en las áreas de dispositivos móviles, inteligencia artificial y sistemas de monitoreo y crear soluciones capaces de brindar apoyo diariamente al recopilar datos e indicadores del estado de salud y, en respuesta, proporcionar diversas acciones personalizadas que motiven la adopción de mejores hábitos de salud y medios para lograr este envejecimiento activo y saludable. El desafío consiste en motivar a esta población a conciliar su día a día con el interés y la voluntad de utilizar aplicaciones y sistemas que brinden este apoyo personalizado. Algunas de las abordajes recientemente explorados en la literatura con este objetivo y que han alcanzado resultados prometedores se basan en la utilización de técnicas de gamificación e incentivo al cumplimiento de desafíos a nivel de salud (como si la persona estuviera jugando un juego) y la utilización de interacciones personalizadas con objetos (ya sean físicos como robots o virtuales como avatares) capaces de brindar feedback más personal, creando así una conexión más cercana entre ambas entidades. El trabajo aquí presentado combina estas ideas y resulta en un enfoque inteligente para la promoción del bienestar de la población anciana a través de un sistema de cuidados de salud personalizado. Este sistema incorpora diversas técnicas de gamificación para la promoción de mejores hábitos y comportamientos, y la utilización de un asistente virtual cognitivo capaz de entender las necesidades e intereses del usuario para posibilitar un feedback e interacción personalizados con el fin de ayudar y motivar al cumplimiento de los diferentes desafíos y objetivos que se identifiquen. El enfoque propuesto fue validado a través de un estudio con 12 usuarios ancianos y se lograron resultados significativos en términos de usabilidad, aceptación y efectos de salud. Específicamente, los resultados obtenidos permiten respaldar la importancia y el efecto positivo de combinar técnicas de gamificación e interacción con un asistente virtual cognitivo que traduzca el progreso del estado de salud del usuario, ya que se lograron mejoras significativas en los resultados de salud después de la intervención. Además, los resultados de usabilidad obtenidos mediante la cumplimentación de un cuestionario de usabilidad confirmaron la buena adhesión a el enfoque presentado. Estos resultados validan la hipótesis de la investigación estudiada en el desarrollo de esta disertación

Age-related differences in the evaluation of a virtual health agent’s appearance and embodiment in a health-related interaction: Experimental lab study

Straßmann C, Krämer NC, Buschmeier H, Kopp S. Age-related differences in the evaluation of a virtual health agent’s appearance and embodiment in a health-related interaction: Experimental lab study. Journal of Medical Internet Research. 2020;22(4): e13726.**Background:** Assistive technologies have become more important owing to the aging population, especially when they foster healthy behaviors. Because of their natural interface, virtual agents are promising assistants for people in need of support. To engage people during an interaction with these technologies, such assistants need to match the users´ needs and preferences, especially with regard to social outcomes. **Objective:** Prior research has already determined the importance of an agent’s appearance in a human-agent interaction. As seniors can particularly benefit from the use of virtual agents to maintain their autonomy, it is important to investigate their special needs. However, there are almost no studies focusing on age-related differences with regard to appearance effects. **Methods:** A 2×4 between-subjects design was used to investigate the age-related differences of appearance effects in a human-agent interaction. In this study, 46 seniors and 84 students interacted in a health scenario with a virtual agent, whose appearance varied (cartoon-stylized humanoid agent, cartoon-stylized machine-like agent, more realistic humanoid agent, and nonembodied agent [voice only]). After the interaction, participants reported on the evaluation of the agent, usage intention, perceived presence of the agent, bonding toward the agent, and overall evaluation of the interaction. **Results:** The findings suggested that seniors evaluated the agent more positively (liked the agent more and evaluated it as more realistic, attractive, and sociable) and showed more bonding toward the agent regardless of the appearance than did students. In addition, interaction effects were found. Seniors reported the highest usage intention for the cartoon-stylized humanoid agent, whereas students reported the lowest usage intention for this agent. The same pattern was found for participant bonding with the agent. Seniors showed more bonding when interacting with the cartoon-stylized humanoid agent or voice only agent, whereas students showed the least bonding when interacting with the cartoon-stylized humanoid agent. **Conclusions:** In health-related interactions, target group–related differences exist with regard to a virtual assistant’s appearance. When elderly individuals are the target group, a humanoid virtual assistant might trigger specific social responses and be evaluated more positively at least in short-term interactions

개발 초기 단계에서의 소셜 AI 개인비서 평가 모델 개발

학위논문(박사) -- 서울대학교대학원 : 공과대학 산업공학과, 2022.2. 윤명환.This dissertation aims to propose a user evaluation model to evaluate social AI personal assistants in the early stage of product development. Due to the rapid development of personal devices, data generated from personal devices are increasing explosively, and various personal AI services and products using these data are being launched. However, compared to the interest in AI personal assistant products, its market is still immature. In this case, it is important to understand consumer expectations and perceptions deeply and develop a product that can satisfy them to spread the product and allow general consumers to easily accept the product promptly. Accordingly, this dissertation proposes and validates a user evaluation model that can be used in the early stage of product development. Prior to proposing this methodology, main characteristics of social AI personal assistants, the importance of user evaluation in the early stage of product development and the limitations of the existing user evaluation model were investigated in Chapter 2. Various technology acceptance models and evaluation models for social AI personal assistant products have been proposed, evaluation models that can be applied in the initial stage of product development were insufficient, however. Moreover, it was found that commonly used evaluation measures for assessment of hedonic value were much fewer compared to measures for utilitarian value. These were used as starting points of this dissertation. In Chapter 3, the evaluation measures used in previous studies related to social AI personal assistant were collected and carefully reviewed. Through systematic review of 40 studies, the evaluation measures used in the past and limitation of related research were investigated. As a result, it was found that it was not easy to develop a prototype for evaluation, so it was possible to make the most of the products that have already been commercialized. In addition, all evaluation items used in previous studies were collected and used as the basis for the evaluation model to be proposed later. As a result of the analysis, considering the purpose of the social AI personal assistant, the role as supporting the user emotionally through social interaction with the user is important, but it was found that the evaluation measures related to hedonic value that are commonly used were still insufficient. In Chapter 4, evaluation measures that can be used in the initial stage of product development for social AI personal assistant were selected. Selected evaluation measures were used to evaluate three types of social robots and relationship among evaluation factors were induced through this evaluation. A process was proposed to understand to various opinions related to social robots and to derive evaluation items, and a case study was conducted in which a total of 230 people evaluated three social robots concept images using the evaluation items finally selected through this process. As a result, it is shown that consumers’ attitude toward products was built through the utilitarian dimension and the hedonic dimension. In addition, there is positive relationship between ease of use and utility in the utilitarian dimension, and among aesthetic pleasure, attractiveness of personality, affective value in the hedonic dimension. Moreover, it is confirmed that the evaluation model derived from this study showed superior explanatory power compared to the previously proposed technology acceptance model. In Chapter 5, the model was validated again by applying the evaluation measure and the relationship among evaluation factors derived in Chapter 4 to other products. 100 UX experts with expertise in the field of social AI personal assistants and 100 users who use the voice assistant service often, watched two concept videos of the voice assistant service to help users in the onboarding situation of mobile phones and evaluated these concepts. As a result of the evaluation, there is no significant difference in the evaluation results between the UX expert and the real user group, so the structural equation model analysis was conducted using all the data obtained from the UX expert and the real user group. As a result, results similar to those in Chapter 4 are obtained, and it is expected that the model could be generalized to social AI personal assistant products and applied for future research. This dissertation proposes evaluation measure and relationship among evaluation factors that can be applied when conducting user evaluation in the initial stage of social AI personal assistant development. In addition, case studies using social AI personal assistant products and services were conducted to validate it. With the findings of this study, it is expected that researchers who need to conduct user evaluation to clarify product concepts in the early stages of product development will be able to apply evaluation measures effectively. It is expected that the significance of this dissertation will become clearer if further research is conducted comparing the finished product of social AI personal assistants with the video type stimulus in the early stage of development.본 논문은 최근 빠르게 발전하고 있는 social AI personal assistant의 개발 초기 단계에 활용 가능한 사용자 평가 항목을 개발하고 평가 항목 간의 관계를 검증하는 것을 목표로 한다. 개인 디바이스의 발달로 인해, 각 디바이스에서 생성되는 데이터가 폭발적으로 증가하고 있고, 이를 활용한 개인용 AI 서비스 및 제품이 다양하게 제안되고 있다. 하지만 그 관심에 비해, social AI personal assistant 제품의 실제 시장은 아직 성숙하지 않은 단계이다. 이러한 상황에서 제품을 빠르게 확산시키고 일반 소비자들이 쉽게 제품을 수용할 수 있게 하기 위해서는, 소비자의 기대와 인식을 충분히 이해하고 그를 충족시킬 수 있는 제품을 개발하는 것이 중요하다. 이에 따라 본 연구에서는 제품 개발 초기 단계에 활용할 수 있는 사용자 평가 항목을 제안하고 평가 항목 간 관계를 도출하는 것을 목표로 한다. 먼저 2장에서는 social AI personal assistant의 특징, 제품 개발 초기 단계에서 이루어지는 사용자 평가의 중요성 및 기존 사용자 평가 모델의 한계점을 조사하였다. 기존에 기술 수용 모델 및 AI personal assistant 제품의 평가 모델들이 다양하게 제안되어 왔으나, 제품 개발 초기 단계에 활용할 수 있는 평가 모델은 부족하였고, 제품 전반을 평가할 수 있는 평가 모델의 부재로 대부분의 기존 연구에서는 두 가지 이상의 평가 모델을 결합, 수정하여 사용한 것을 알 수 있었다. 3장에서는 AI personal assistant 관련 기존 연구에서 활용된 평가 항목을 검토하였다. 총 40개의 연구를 리뷰하여, 기존에 활용되고 있는 평가 항목의 종류 및 한계점을 알아보았다. 그 결과, 평가를 위한 프로토타입 개발이 쉽지 않기에 이미 상용화된 제품들을 최대한 활용하는 것을 알 수 있었으며, 제품 전반을 평가한 사례는 부족함을 알 수 있었다. 또한 기존 연구들이 사용한 평가 항목을 모두 수집 및 정리하여 이후 제안할 평가 모델의 기반 자료로 활용하였다. 분석 결과, social AI personal assistant의 목적을 고려해보았을 때, 사용자와의 사회적 인터랙션을 통해 사용자의 감정적인 면을 채워주는 역할이 중요하지만, 공통적으로 활용하고 있는 감정적 가치 관련 평가 항목이 부족한 것으로 나타났다. 4장에서는 social AI personal assistant 제품 개발 초기 단계에서 활용 가능한 평가 항목을 수집 및 제안하고, 평가 항목을 활용하여 social robots을 평가한 뒤 이를 통해 평가 항목 간의 관계를 도출하였다. Social robots 관련 의견을 다양하게 청취하고 평가 항목을 도출하는 프로세스를 제안하였으며, 본 프로세스를 통해 최종 선정된 평가 항목을 이용하여, 총 230명이 세 가지 social robots 컨셉 영상을 평가하는 사례 연구를 진행하였다. 평가 결과, 제품에 대한 소비자 태도는 Utilitarian dimension과 Hedonic dimension을 통해 형성되었고, Utilitarian dimension 내 사용성 및 제품 효용성, Hedonic dimension에 포함되는 심미적 만족도, 성격의 매력도, 감성적 가치 각각은 서로 긍정적인 상관관계를 지님을 알 수 있었다. 또한 기존에 제안된 기술 수용 모델 대비 본 연구에서 도출한 평가 모델이 우수한 설명력을 보임을 확인하였다. 5장에서는 4장에서 도출된 평가 모델을 타 제품에 적용하여 모델을 다시 한번 검증하였다. 해당 분야에 전문성을 지닌 UX 전문가 100명 및 음성 비서 서비스를 실제 사용하는 실사용자 100명이, 휴대폰 온보딩 상황에서 사용자를 도와주는 음성 비서 서비스의 컨셉 영상 두 가지를 보고 컨셉에 대한 평가를 진행하였다. 평가 결과 UX 전문가와 실사용자 그룹 간에는 평가 결과에 유의미한 차이를 보이지 않았기 때문에, UX 전문가와 실사용자 그룹에서 얻은 데이터 전체를 활용하여 구조 방정식 모델 분석을 진행하였다. 그 결과 5장과 유사한 수준의 결과를 얻었고, 추후 해당 모델을 social AI personal assistant 제품에 일반화하여 활용할 수 있을 것으로 판단하였다. 본 논문은 social AI personal assistant 관련 제품 및 서비스의 개발 초기 단계에서 사용자 평가를 진행할 때 활용 가능한 평가 항목 및 평가 항목 간의 관계를 도출하였다. 또한 이를 검증하기 위하여 social AI personal assistant 제품 및 서비스를 활용한 사례연구를 진행하였다. 본 연구 결과는 추후 제품 개발 초기 단계에서 제품의 컨셉을 명확히 하기 위한 사용자 평가를 실시해야 하는 연구진이 효율적으로 활용할 수 있을 것으로 기대된다. 추후 이 부분의 검증을 위해, social AI personal assistants의 완제품과 개발 초기 단계의 video type stimulus를 비교하는 추가 연구가 이루어진다면 본 연구의 의미를 보다 명확하게 제시할 수 있을 것으로 생각된다.Chapter 1 Introduction 1 1.1 Background and motivation 1 1.1 Research objectives 5 1.2 Dissertation outline 7 Chapter 2 Literature review 9 2.1 Social AI personal assistant 9 2.2 User centered design process 13 2.3 Technology acceptance models 16 2.4 Evaluation measures for social AI personal assistant 22 2.5 Existing evaluation methodologies for social AI personal assistant 27 Chapter 3 Collection of existing evaluation measures for social AI personal assistants 40 3.1 Background 40 3.2 Methodology 43 3.3 Result 51 3.4 Discussion 60 Chapter 4 Development of an evaluation model for social AI personal assistants 63 4.1 Background 63 4.2 Methodology 66 4.2.1 Developing evaluation measures for social AI personal assistants 68 4.2.2 Conducting user evaluation for social robots 74 4.3 Result 77 4.3.1 Descriptive statistics 77 4.3.2 Hypothesis development and testing 80 4.3.3 Comparison with existing technology acceptance models 88 4.4 Discussion 93 Chapter 5 Verification of an evaluation model with voice assistant services 95 5.1 Background 95 5.2 Methodology 98 5.2.1 Design of evaluation questionnaires for voice assistant services 99 5.2.2 Validation of relationship among evaluation factors 103 5.3 Result 108 5.3.1 Descriptive statistics 108 5.3.2 Hypothesis development and testing 111 5.3.3 Comparison with existing technology acceptance models 118 5.4 Discussion 121 Chapter 6 Conclusion 124 6.1 Summary of this study 124 6.2 Contribution of this study 126 6.3 Limitation and future work 128 Bibliography 129 Appendix A. Evaluation measures for social AI personal assistant collected in Chapter 4 146 Appendix B. Questionnaires for evaluation of social robots 154 Appendix C. Questionnaires for evaluation of voice assistant service 166박

Predictive Modeling in Action: How 'Virtual Wards' Help High-Risk Patients Receive Hospital Care at Home

Describes a program to reduce hospitalizations by providing multidisciplinary case management and coordinated preventive care at home to chronic disease patients found to be at risk of emergency hospitalization by predictive modeling. Outlines challenges

장애인 사용자들을 대상으로 한 음성 사용자 인터페이스의 사용자 경험에 대한 사용자 중심 연구: 지능형 개인 비서를 중심으로

학위논문 (박사) -- 서울대학교 대학원 : 인문대학 협동과정 인지과학전공, 2021. 2. 윤명환.In recent years, research on Voice User Interfaces (VUIs) has been actively conducted. The VUI has many advantages which can be very useful for the general public as well as for elderly people and people with disabilities. The VUI is considered very suitable for individuals with disabilities to promote universal access to information, decreasing the gap between users with non-disabilities and users with disabilities. In this respect, many researchers have been trying to apply the VUI to various areas for people with disabilities to increase their independence and quality of life. However, previous studies related to VUIs for people with disabilities usually focused on developments and evaluations of new systems, and empirical studies are limited. There have been a few studies related to User Experience (UX) of VUIs for people with disabilities. This situation is not different with studies related to Intelligent Personal Assistants (IPAs) which one of the most wildly being used VUIs nowadays. Although IPAs have potential to be practically used for users with disabilities because they can perform various tasks than simple VUIs, research related to UX of IPAs for them has been paid little attention to, only focusing on a young adult and middle-aged group among people with non-disabilities as end-users. Many previous studies referred to that IPAs would be helpful to people with disabilities. However, only a few studies related to IPAs have been conducted from the angle of users with disabilities, especially in terms of UX. It is known for that investigating usability and UX for users with disabilities is more difficult and delicate than that of users with non-disabilities. It can be said that research on UX of IPAs for users with disabilities should be conducted more closely to understand their interactions with IPAs. The purpose of the research in this dissertation is to investigate UX of VUIs for users with disabilities, focusing on IPAs. The research in this dissertation consists of three independent main studies. Study 1 investigates UX of commercially available VUIs for users with disabilities, by examining acceptance, focusing on the differences between users with different types of disabilities and identifying the reasons why they use or not use VUIs. A questionnaire survey was conducted for users with disabilities having used one or more VUIs. The collected data were analyzed statistically and qualitatively. The results of this study show acceptance of VUIs and the relationships between the acceptance factors for users with disabilities, with some differences between users with different types of disabilities. The results of this study also provide some insights related to UX of VUIs for users with disabilities from their perspective, showing that the acceptance factors can be used as criteria in comprehending the issues. Study 2 investigates UX of IPAs based on online reviews written by users through semantic network analysis. Before investigating UX of IPAs for users with disabilities, important factors for UX of IPAs were proposed by investigating UX of IPAs for users with non-disabilities in this study. As a case study, online reviews on smart speakers from the internet were collected. Then, the collected text data were preprocessed and structured in which words having similar meaning were clustered into one representative keyword. After this, the frequency of the keywords was calculated, and keywords in top 50 frequency were used for the analysis, because they were considered core keywords. Based on the keywords, a network was visualized, and centrality was measured. The results of this study show that most of the users were satisfied with the use of IPAs, although they felt that the performance of them was not completely reliable. In addition, the results of this study show aesthetic aspects of IPAs are also important for users’ enjoyment, especially for the satisfaction of users. This study proposes eleven important factors to be considered for UX of IPAs and among them, suggests ten factors to be considered in the design of IPAs to improve UX of IPAs and to satisfy users. Study 3 investigates UX of IPAs for users with disabilities and identifies how the use of IPAs affects quality of life of them, based on Study 1 and Study 2. In this study, comparisons with users with non-disabilities are also conducted. A questionnaire survey and a written interview were conducted for users with disabilities and users with non-disabilities having used one or more smart speakers. The collected data were analyzed statistically and qualitatively. The results of this study show that, regardless of disability, most users are sharing the main UX of IPAs and can benefit the use of IPA. The results of this study also show that the investigation on qualitative data is essential to the study for users with disabilities, offering various insights related to UX of IPAs from the angle of them and clear differences in UX of IPAs between users with disabilities and users with non-disabilities. This study proposes important factors for UX of IPAs for users with disabilities and users with non-disabilities based on the discussed factors for UX of IPAs in Study 2. This study also discusses various design implications for UX of IPAs and provides three important design implications which should be considered to improve UX, focusing on the interaction design of IPAs for not only users with disabilities but also all potential users. Each study provides design implications. Study 1 discusses design implications for UX of VUIs for users with disabilities. Study 2 suggests design implications for UX of IPAs, focusing on users with non-disabilities. Study 3 discusses various design implications for UX of IPAs and proposes three specific implications focusing on the interaction design of IPAs for all potential users. It is possible to expect that reflecting the implications in the interaction design of IPA will be helpful to all potential users, not just users with disabilities.최근에 들어와 음성 사용자 인터페이스들(Voice User Interfaces, VUIs)에 대한 연구가 활발히 진행되고 있다. VUI는 일반적인 사람들은 물론, 고령자 및 장애인들에게도 매우 유용한 많은 장점들을 가지고 있다. VUI는 장애인들에게 보편적 정보 접근을 용이하게 한다는 점에서 장애인과 비장애인 간 존재할 수 있는 정보 격차를 줄이는 매우 유용한 역할을 할 수 있다. 이러한 관점에서, 많은 연구자들은 장애인들의 독립성과 삶의 질을 높이기 위해 VUI를 다양한 영역에 적용하려고 하고 있다. 하지만, 장애인들을 위한 VUIs와 관련된 선행연구들은 대부분 새로운 시스템의 개발 및 평가에 중점을 두고 있으며 경험적 연구는 제한적이다. 특히, 장애인을 위한 VUIs와 관련된 연구들 중 사용자경험(User Experience, UX)에 대한 연구는 상당히 드물다. 이러한 상황은 오늘날 가장 많이 사용되는 VUIs 중 하나인 지능형 개인 비서들(Intelligent Personal Assistants, IPAs)에 대한 연구에서도 마찬가지이다. IPAs는 단순한 VUIs보다 다양한 작업을 수행할 수 있기 때문에 장애가 있는 사용자들에게 매우 실용적으로 사용될 수 있다. 하지만, IPAs의 UX 관련된 연구는 거의 주목받지 못 하고 있으며, 비장애인 중 청년 및 중년층만이 최종 사용자들로 고려되고 있다. 이전의 많은 선행연구들은 IPAs가 장애가 있는 사람들에게 큰 도움이 될 수 있다고 입을 모아 말한다. 그러나 실재로 장애인 사용자들의 입장에서 진행된 IPAs와 관련된 연구는 별로 없으며 IPAs의 UX 관련된 연구는 더욱 부족한 상황이다. 비장애인 사용자들과 비교했을 때 장애인 사용자들의 입장에서 사용성(usability) 및 UX를 조사하는 것은 복잡하고 어려운 일이다. 그렇기에 장애가 있는 사용자를 위한 IPAs의 UX에 대한 연구가 보다 철저히 이루어져야 한다고 볼 수 있다. 이러한 배경을 두고, 본 학위논문의 연구 목적은 장애인 사용자들을 대상으로 IPAs에 중점을 두고 VUIs의 UX를 조사하는 것이다. 본 학위논문은 크게 세 개의 독립적인 연구로 이루어져 있다. 연구 1에서는 다른 장애를 가지고 있는 장애인 사용자들의 차이들과 그들이 VUIs을 사용하거나 사용하지 않는 이유를 파악하는데 중점을 두고, 상용화된 VUIs의 UX를 조사한다. 하나이상의 VUIs를 사용한 경험이 있는 장애인 사용자들을 대상으로 설문조사를 하였다. 수집된 데이터는 통계적으로 그리고 정성적으로 분석하였다. 이 연구의 결과들은 장애인 사용자들의 장애유형에 따라 VUIs의 수용도(acceptance)와 수용도 요인들 간 관계에 차이가 있다는 것을 보여준다. 또한, 이 연구의 결과들은 수용도 요인들이 VUIs의 UX 이슈들을 이해하는데 사용될 수 있다는 것을 보여줌과 함께 장애인 사용자들을 위한 VUIs의 UX와 관련된 다양한 인사이트들(insights)을 제공해준다. 연구 2에서는 의미 신경망(semantic network) 분석을 통해 사용자가 작성한 온라인 리뷰를 기반으로 IPAs의 UX를 조사한다. 해당 연구는 장애인 사용자들에 대한 IPAs의 UX를 조사하기 전에 비장애인 사용자들에 대한 IPAs의 UX를 조사하여 IPAs의 UX와 관련하여 중요하게 고려해야 할 요인들을 제안하였다. 이를 위해 사례 연구로, 인터넷에서 스마트 스피커에 대한 온라인 리뷰들을 수집하였다. 그 후, 텍스트 데이터를 전처리 및 구조화였고, 이 과정에서 유사한 의미를 갖는 단어들이 있을 경우 하나의 대표 키워드로 변환하였다. 이 과정을 거친 후, 키워드들에 대한 빈도수를 계산하여, 빈도수 상위 50개의 키워드들이 핵심 키워드들로 보였기에, 빈도수 상위 50개의 키워드들을 분석에 사용했다. 이 키워드들을 바탕으로 네트워크를 시각화 하였고 중심성(centrality)을 계산했다. 이 연구의 결과들은 비록 IPAs의 성능에 대해서 완전히 신뢰하지는 못 하고 있더라도 대부분의 사용자들이 IPAs 사용에 만족하고 있었다는 것을 보여준다. 또한 이 연구의 결과들은 IPAs의 심미적 측면들이 사용자들의 즐거움과 만족에 중요하다는 것을 보여준다. 이 연구는 IPAs의 UX를 위해 고려해야 할 열 한 개의 중요 요인들을 제안하고, 그 중에서 사용자들을 만족시키고 IPAs의 디자인 시 고려해야 할 필요가 있는 열 개의 요인들을 시사해준다. 연구 3에서는, 연구 1과 연구 2를 바탕으로, 장애인 사용자들을 대상으로 IPAs의 UX에 대해 조사하고 IPAs의 사용이 그들의 삶의 질(quality of life)에 어떠한 영향을 주는지에 대해서 알아보고자 한다. 이 과정에서 비장애인 사용자들과 비교 또한 이루어졌다. 하나이상의 IPAs를 사용하고 있는 장애인 사용자들과 비장애인 사용자들을 대상으로 설문조사와 서면 인터뷰를 진행하였다. 수집된 데이터는 통계적으로 그리고 정성적으로 분석하였다. 이 연구의 결과들은, 장애 유무와 상관없이, 대부분의 사용자들이 주요 IPAs의 UX를 공유하고 있으며 IPAs 사용에 혜택을 누리고 있다는 것을 보여준다. 또한, 이 연구의 결과들은 장애인 사용자들의 입장에서 IPAs의 UX와 관련된 다양한 인사이트들과 함께 두 사용자 그룹 간 명확한 차이가 있다는 것을 보여줌으로써 이들을 대상으로 한 연구에서 정성적 데이터에 대한 분석이 필수적이라는 사실을 보여준다. 이 연구는, 연구 2에서 논의된 요인들을 바탕으로, 장애인 사용자들과 비장애인 사용자들을 위한 IPAs의 UX에 있어 중요 요인들을 제안한다. 또한 이 연구는 IPA의 UX에 대한 다양한 디자인 함의들(implications)을 논의하고, 장애가 있는 사용자들뿐만 아니라 모든 잠재적 사용자들을 고려한 IPA의 상호 작용 설계에 중점을 둔 구체적인 세 개의 디자인 함의들을 제공한다. 각 연구는 디자인 함의들을 제공한다. 연구 1에서는 장애인 사용자들을 대상으로 VUIs의 UX를 위한 디자인 함의들을 논의한다. 연구 2에서는 비장애인 사용자들에게 초점을 두고 IPAs의 UX를 위한 디자인 함의들을 제시한다. 연구 3에서는 장애인 사용들만이 아닌 모든 잠재적 사용자들에게 도움이 될 수 있는 다양한 디자인 함의들을 논의하고 IPA의 상호 작용 설계에 중점을 둔 구체적인 세 개의 디자인 함의들을 제안한다. 이러한 함의들을 IPAs의 디자인에 반영하는 것은 장애인 사용자들뿐만 아니라 잠재적인 모든 사용자들에게 도움이 될 것이다.ABSTRACT I CONTENTS V LIST OF TABLES VIII LIST OF FIGURES X CHAPTER 1 INTRODUCTION 1 1.1. Research Background 1 1.2. Research Objective 4 1.3. Outline of this Dissertation 7 CHAPTER 2 LITERATURE REVIEW 10 2.1. People with Disabilities and Research Methods for Them 10 2.1.1. People with Disabilities 10 2.1.2. Research Methods for People with Disabilities 11 2.2. Conceptual Frameworks 13 2.2.1. User Experience of Voice User Interfaces 13 2.2.2. Design Approaches for Accessibility 18 2.3. Related Work 22 2.3.1. Previous Studies Related to Voice User Interfaces 22 2.3.2. Previous Studies Related to Intelligent Personal Assistants 25 CHAPTER 3 INVESTIGATION ON USER EXPERIENCE OF VOICE USER INTERFACES FOR USERS WITH DISABILITIES BY EXAMINING ACCEPTANCE 31 3.1. Introduction 31 3.2. Method 35 3.2.1. Participants 35 3.2.2. Procedure 35 3.2.3. Questionnaire 36 3.2.4. Analysis 38 3.2.4.1. Statistical Analysis 38 3.2.4.1. Qualitative Analysis 38 3.3. Results 38 3.3.1. Reliability Analysis and Validity Analysis 38 3.3.2. Descriptive Analysis and Independent Two-Sample T-Test 39 3.3.3. Multiple Regression Analysis 39 3.3.4. Analysis on Comments of the Participants 44 3.4. Discussion 45 3.4.1. User Experience of Voice User Interfaces for Users with Disabilities 45 3.4.2. Reasons of Users with Disabilities for Using Voice User Interfaces or not 48 3.4.3. Design Implications on Voice User Interfaces for Users with Disabilities 50 3.5. Conclusion 51 CHAPTER 4 INVESTIGATION ON USER EXPERIENCE OF INTELLIGENT PERSONAL ASSISTANTS FROM ONLINE REVIEWS BY IDENTIFYING IMPORTANT FACTORS 54 4.1. Introduction 54 4.2. Method 56 4.2.1. Data Collection 56 4.2.2. Preprocessing and Structuring Data 57 4.2.3. Analysis 57 4.3. Results 60 4.3.1. Analysis on Frequency of the Keywords and Categorizing the Keywords 61 4.3.2. Visualization of the Network 61 4.3.3. Analysis on Centrality of the Keywords 65 4.4. Discussion 65 4.4.1. User Experience of Intelligent Personal Assistants through Semantic Network Analysis from Online Reviews 65 4.4.2. Important Factors for User Experience of Intelligent Personal Assistants and Design Implications 70 4.5. Conclusion 74 CHAPTER 5 INVESTIGATION ON USER EXPERIENCE OF INTELLIGENT PERSONAL ASSISTANTS AND EFFECTS ON QUALITY OF LIFE FOR USERS WITH DISABILITIES BY COMPARING WITH USERS WITH NON-DISABILITIES 76 5.1. Introduction 76 5.2. Method 78 5.2.1. Participants 78 5.2.2. Procedure 79 5.2.3. Questionnaire 79 5.2.4. Written Interview 81 5.2.5. Analysis 84 5.2.5.1. Statistical Analysis 84 5.2.5.2. Qualitative Analysis 84 5.3. Results 85 5.3.1. Reliability Analysis and Validity Analysis 85 5.3.2. Descriptive Analysis and Mann-Whitney U-test 85 5.3.2.1. User Experience of Intelligent Personal Assistants 85 5.3.2.2. Effects of the Use of Intelligent Personal Assistants on Quality of Life 87 5.3.3. Analysis on the Written Interview 89 5.3.3.1. Analysis on Issues Related to User Experience from the Written Interview 89 5.3.3.2. Semantic Network Analysis on the Written Interview 91 5.4. Discussion 99 5.4.1. User Experience of Intelligent Personal Assistants 99 5.4.1.1. Discussion on the Statistical Analysis 99 5.4.1.2. Discussion on the Analysis on the Written Interview 106 5.4.2. Effects of the Use of Intelligent Personal Assistants on Quality of Life 110 5.4.2.1. Discussion on the Statistical Analysis 110 5.4.2.2. Discussion on the Analysis on the Written Interview 111 5.4.3. Design Implications for User Experience of Intelligent Personal Assistants for Users with Disabilities 112 5.5. Conclusion 115 CHAPTER 6 DISCUSSION AND CONCLUSION 118 6.1. Summary of this Research 118 6.2. Contributions of this Research 121 6.3. Limitations of this Research and Future Studies 124 BIBLIOGRAPHY 126 APPENDIX 143 ABSTRACT IN KOREAN (국문 초록) 181Docto