With future advancements and adoption of autonomous vehicles, it is of interest for humans to see where vehicles are headed. Meanwhile, advancements of mixed reality, MR, headsets indicate that headsets may eventually become so small and comfortable that they will be suitable for everyday wear. With this background, this thesis explores how visualizations in mixed reality impact situation awareness SA, of a human. As autonomous vehicles do not require steering controls, but may still be blocking a human’s path, it is of interest to explore how virtual controllers in MR can be used to move these vehicles. Therefore, this thesis also explores the impact of MR virtual controllers’ usefulness when directing a vehicle as opposed to joystick controllers. Given this context, the thesis’ aim was to explore both of these topics, resulting in the implementation of a system where a remote-controlled, RC, car’s imminent path was visualized and controlled by MR virtual controllers. The implementation of this was done in the Rust programming language and deployed on a Meta Quest 3 headset. Evaluation of the system was done by subjectively based user tests, where the test included three scenarios. These included driving the car with a joystick without visualization and using virtual controllers with and without visualization. Discussions around the impact of language barriers, hardware choice, alternative methods, and the interest in finding an optimal minimal amount of visualizations are had in regards to the results. The study concludes that virtual controllers can provide a better user experience than joystick controllers and that visualizations do not prove to be significantly beneficial as opposed to no visualization.
Med framtida framsteg och adoption av autonoma fordon är det av intresse för människor att kunna se vart fordonen är på väg. Samtidigt indikerar framsteg inom mixed reality att headseten så småningom kan bli så små och bekväma att de kommer att vara lämpliga för vardagsanvändning. Med denna bakgrund utforskar denna rapport hur visualiseringar i mixed reality påverkar situation awareness för en människa. Eftersom autonoma fordon inte kräver styrkontroller, men ändå kan blockera en människas väg, är det av intresse att utforska hur virtuella kontroller i mixed reality kan användas för att flytta dessa fordon. Därför undersöker denna rapport också nyttan av mixed -realitybaserade virtuella kontroller när man styr ett fordon jämfört med joystickkontroller. Givet detta var målet med rapporten att utforska båda dessa ämnen, vilket resulterade i implementeringen av ett system där en fjärrstyrd bils omedelbara väg visualiserades och kontrollerades av mixed-realitybaserade virtuella kontroller. Implementeringen av detta gjordes i programmeringsspråket Rust och testades på ett Meta Quest 3-headset. Utvärdering av systemet gjordes genom subjektiva användartester, där testet inkluderade tre scenarier. Dessa inkluderade att köra bilen med en joystick utan visualisering och att använda virtuella kontroller med och utan visualisering. Diskussioner kring påverkan av språkbarriärer, val av hårdvara, alternativa metoder och intresset av att hitta en optimal mängd visualiseringar förs i relation till resultaten. Studien drar slutsatsen att virtuella kontroller kan ge en bättre användarupplevelse än joystickkontroller och att visualiseringar inte visar sig vara betydligt fördelaktiga jämfört med ingen visualisering.