A Content-Analysis Approach for Exploring Usability Problems in a Collaborative Virtual Environment

As Virtual Reality (VR) products are becoming more widely available in the consumer market, improving the usability of these devices and environments is crucial. In this paper, we are going to introduce a framework for the usability evaluation of collaborative 3D virtual environments based on a large-scale usability study of a mixedmodality collaborative VR system. We first review previous literature about important usability issues related to collaborative 3D virtual environments, supplemented with our research in which we conducted 122 interviews after participants solved a collaborative virtual reality task. Then, building on the literature review and our results, we extend previous usability frameworks. We identified twelve different usability problems, and based on the causes of the problems, we grouped them into three main categories: VR environment-, device interaction-, and task-specific problems. The framework can be used to guide the usability evaluation of collaborative VR environments

Virtuaalinen todellisuus yhteistoiminnallisen oppimisen ja yhteenkuuluvuuden tunteen tukemisessa : Opiskelijoiden kokemuksia kahdesta oppimisympäristöstä

Tavoitteet. Virtuaalitodellisuus on herättänyt paljon kiinnostusta uudenlaisena oppimisen ja opettamisen työkaluna, mutta tutkimus on painottunut enimmäkseen käytettävyyden tutkimiseen eikä oppimista tukevien opetusratkaisujen tutkimiseen. Tämän tutkimuksen tavoitteena oli tutkia kuinka hyvin yhteistoiminnallisen oppimisen elementtejä ja yhteenkuuluvuuden tunnetta voidaan tukea oppitunnilla, jossa käytetään oppimisvälineenä yksiä VR-laseja. Tässä tutkimuksessa vertailtiin opiskelijoiden kokemuksia oppitunnilla, jossa käytettiin virtuaalilaseja ja virtuaalimaailmaa näyttävää näyttöä työpajaoppituntiin, jossa opiskeltiin oikean laitteen äärellä. Menetelmät. Tämän tutkimuksen osallistujina oli toisen ja korkea-asteen metsäalan opiskelijoita (N = 35). Tutkimus oli monimenetelmällinen, ja tutkimusaineistoa kerättiin puolistrukturoiduilla teemahaastatteluilla ja sähköisellä kyselylomakkeella. Aineisto sisälsi kaksi ryhmähaastattelua ja yhden parihaastattelun, sekä neljän kyselylomakkeen vastaukset kaikilta osallistujilta. Aineisto analysoitiin teorialähtöisellä sisällönanalyysilla ja ei-parametrisilla kvantitatiivisilla testeillä. Tulokset ja johtopäätökset. Tässä tutkimuksessa havaittiin, että yhteistoiminnallista oppimista koettiin vähemmän oppitunnilla, jossa käytettiin VR-työkalua. VR-työkalun koettiin kannustavan enemmän yksilökeskeiseen työskentelyyn ja heikentävän kommunikaatiota opiskelijoiden välillä, mikä heikentää positiivista keskinäistä riippuvuutta ja vuorovaikutteista viestintää. Tutkimustulokset viittasivat myös siihen, että yhteenkuuluvuuden tunteen kokemus vahvistui siirryttäessä VR-oppitunnilta työpajaan ja heikentyi työpajatunnilta siirryttäessä VR-oppitunnille, vaikkakin nämä tulokset eivät olleet tilastollisesti merkitseviä. Tulosten perusteella voidaan todeta, että VR oppimisvälineenä voidaan kokea positiivisemmin, kun sitä käytetään johdantona uuteen aiheeseen. Yhteistoiminnallista oppimista tavoiteltaessa tulisi kiinnittää huomiota positiivisen keskinäisen riippuvuuden ja vuorovaikutteisen viestinnän tukemiseen oppitunnilla, kun käytetään virtuaalista todellisuutta.Objectives. Virtual reality has gained a lot of interest with its new possibilities for teaching and learning, but research has focused on usability rather than lesson designs that support learning. The aim of this study is to examine how the elements of cooperative learning and relatedness are supported in a student group learning with one pair of VR headset. The study compared students’ experiences with a conventional workshop lesson and a lesson with a VR learning tool. Methods. The participants of this study were forestry students (N=35) both in upper secondary and higher education. Mixed methods were used, and data were collected using semi-structured thematic interviews and electronic surveys. The data consisted of two group interviews and one pair interview, as well as data from four surveys from each participant. The data were analysed with theory-driven thematic analysis and nonparametric quantitative methods. Results and conclusions. The results of this study showed that cooperative learning was less experienced in the lesson with a VR learning tool than in the lesson with a physical machine. VR tool was seen to encourage more individual work and decreasing communication between the user and the peers, negatively affecting the positive interdependence and promotive interaction between group members. The results also suggested that experiences of relatedness became stronger when changing from VR lesson to workshop and weakened when changing from workshop to VR, though these results were not statistically significant. The findings suggest that experiences with VR might be more positive when the tool is used as an introduction to a new topic in the studies. When cooperative learning of students is pursued, it is suggested that more focus should be laid on supporting positive interdependence and promotive interaction in a lesson design with a VR tool