Mark Colley, M. Sc.

Mark Colley ist der HCI Gruppe im April 2019 als wissenschaftlicher Mitarbeiter und Doktorand beigetreten. Davor war er seit 2015 als Software Engineer bei Airbus tätig.

Mark hat einen M. Sc. in Informatik (2018) von der Universität Ulm. Der Titel der Masterarbeit lautete: Identification, Investigation and Classification of Use Cases for Cooperation in Highly Autonomous Driving and the Applicability thereof. Diese fand im Rahmen des Projektes KoFFI - Kooperative Fahrer-Fahrzeug-Interaktion statt.

Seinen B. Eng. in Informationstechnik erlangte Mark 2015 an der Dualen Hochschule Baden-Württemberg Ravensburg/Friedrichshafen in Zusammenarbeit mit Airbus.

Forschungsinteressen

  • Autonomous Driving
  • Driver-Vehicle Interaction
  • Augmented Reality
  • Virtual Reality
  • Mobile Devices
  • Head Mounted Displays

Projekte

Im Rahmen des Forschungsförderungsprogramms „Smart Mobility“ des Landes Baden-Württemberg startet ab November 2018 das Projekt „Intuitiver“ zur Interaktion zwischen automatisierten Fahrzeugen und leicht verletzbaren Verkehrsteilnehmern. Das Projekt beschäftigt sich mit den Fragen wie autonome Fahrzeuge und Fußgänger die Absicht des jeweils anderen Interaktionspartners, beispielsweise beim Queren der Straße, erkennen können und wie autonome Fahrzeuge Insassen über ihre Absichten informieren. Prof. Dr. Martin Baumann (Psychologie), Prof. Dr. Klaus Dietmayer (Mess-, Regel- und Mikrotechnik), Prof. Dr. Christian Waldschmidt (Mikrowellentechnik) und Prof. Dr. Enrico Rukzio (Medieninformatik) der Universität Ulm sind Teil des Konsortiums.

<p>Mark untersucht im Rahmen des Verbundprojekts <a class="external-link-new-window" href="https://www.uni-ulm.de/in/omi/institut/blog/details/article/neues-projekt-intuitiver-zur-interaktion-zwischen-automatisierten-fahrzeugen-und-leicht-verletzbaren-verkehrsteilnehmern/" title="Opens internal link in current window">Intuitiver</a> Kommunikationsmöglichkeiten zwischen hochautomatisierten Fahrzeugen und leicht verletzbaren Verkehrsteilnehmern (Passanten, Fahrradfahrern etc.).</p>

Kooperationspartner: Ulm University, AVL Software & Functions GmbH, Human-Factors-Consult GmbH, Humatects GmbH, OFFIS e.V..

SituWare adressiert ein zentrales Hindernis für die Einführung von hochautomatisierten Fahrzeugen (siehe auch BASt) in den komplexen Verkehr: Die erforderliche Zeitreserve für eine sichere Übergabe der Kontrolle an den abgelenkten Fahrer. Auch mittelfristig verfügbare Umfeldsensoren können nicht immer große Zeitreserven garantieren. SituWare reduziert die Übernahmezeit durch eine gezielte, situationsbezogene Wahrnehmung des Fahrers
Angepasste Fahrerführung und ermöglicht ein flüssiges Fahrzeugverhalten mit hoher Benutzerakzeptanz durch Anpassung der Automatisierung an das Situationsbewusstsein des Fahrers.

 

Mark untersucht dabei wie Übergabeprozesse durch multimodale Aufmerksamkeits- und Informationslenkung sicherer und schneller gestaltet werden können.

Ziel des Projektes SEMULIN (Selbstunterstützende Multimodale Interaktion) ist die Entwicklung einer selbstunterstützenden, natürlichen und widerspruchsfreien Mensch-Maschine-Schnittstelle für automatisiert fahrende Fahrzeuge mittels multimodaler Ein- und Ausgabekonzepte.

Hierbei werden in Zusammenarbeit mit Elektrobit Automotive GmbH (project lead), audEERING GmbH, Eesy Innovation GmbH, Fraunhofer-Institut für Integrierte Schaltungen, Infineon Technologies AG, Universität Ulm, und dem assoziierten Partner Mercedes-Benz AG neuartige Interaktionskonzepte unter Berücksichtigung multimodaler Ein- und Ausgabekonzepte entwickelt.

 

Mark untersucht dabei wie bisherige Interaktion in Fahrzeugen stattfindet und wie diese durch die multimodale Interaktion verbessert werden können.

 

 

People with vision impairments (VIP) are among the most vulnerable road users in traffic. Autonomous vehicles are believed to reduce accidents but still demand some form of external communication signaling relevant information to pedestrians. Recent research on the design of vehicle-pedestrian communication (VPC) focuses strongly on concepts for a non-disabled population. Our work presents an inclusive user-centered design for VPC, beneficial for both vision impaired and seeing pedestrians. We conducted a workshop with VIP (N=6), discussing current issues in road traffic and comparing communication concepts proposed by literature...

Read more...

Lehre

Bei mir können gern Abschlussarbeiten mit Fokus auf der Interaktion mit (teil-)autonomen Fahrzeugen und deren Auswirkungen durchgeführt werden. Dabei geht es um die Interaktion im Auto, jedoch auch um die Interaktion von Außenstehenden (Passanten, Fahrradfahrer, ...) mit autonomen Fahrzeugen. Für Themenvorschläge von Euch bin ich jederzeit offen.

Bitte kontaktiert mich per E-Mail, wenn Ihr Interesse habt. Unten stehende sind einige potenzielle Arbeitsgebiete aufgelistet.

Ich freue mich schon auf unsere Zusammenarbeit.

Abschlussarbeiten:

AI-Based Interaction in Autonomous Vehicles
Introducing Holographic Displays in the Automotive Context
Multimodal Interaction in Automated Driving
Uncertainty Visualization in Automated Driving
Aiding Impaired Persons Through Autonomous Vehicles External Communication
Information Needs in Highly Automated Driving
External Communication in Highly Automated Driving

Implicit Communication of (Highly Automated) Vehicles

Incorporating Human Operators in Vehicle-Human Communication

Macroscopic Effects of eHMIs on Traffic

 

Weitere Abschlussarbeiten findet ihr unter diesem Link

 

Master Theses

  • Investigations on the Use of Augmented Reality for Information Visualization in Connected Automated Driving
  • Exploring the Social Context of Collaborative Driving
  • Optimizing Localization of Sound for the Hearing Impaired in Traffic with AVs
  • SwiVR-Car-Seat: Utilizing a Motorized Swivel Seat to Explore Effects of Vehicle Motion on Interaction Quality in Virtual Reality Automated Driving
  • User-Centric Exploration of In-Car Augmented Reality UI Concepts for See-Through Head-Mounted Displays

Bachelor Theses

  • Informationsbedürfnisse in autonomen Fahrzeugen und Auswirkung der Visualisierung der Fußgängerintention auf Vertrauen und kognitive Belastung
  • External Communication of Heavy Machinery (or Autonomous Trucks) on Construction Sites
  • Effect of Displaying Semantic Segmentation on Trust, Situation Awareness and Cognitive Load
  • Increasing Pedestrian Safety Using External Communication of Autonomous Vehicles for Signalling Hazards
  • Auswirkung der Visualisierung der Wahrnehmung Autonomer Fahrzeuge in Kritischen Verkehrssituationen auf Vertrauen und Kognitive Belastung
  • Investigating the Effects of Prosocial External Communication of Autonomous Vehicles
  • Auswirkungen von Abstraktionsebenen in der Informationsvisualisierung auf Situationsbewusstsein, Kognitive Belastung und Benutzerfreundlichkeit bei Kontrollübernahme-Aufforderungen in Hochautomatisierten Fahrzeugen
  • Effects of Scene Detection, Scene Prediction, and Maneuver Planning Visualizations on Trust, Situation Awareness, and Cognitive Load in Highly Automated Vehicles
  • Realistic Scenarios for the Communication between Autonomous Vehicle and Pedestrians
  • Investigating the Effects of External Communication and Automation Behavior on Manual Drivers
  • Mode Confusion of External Communication
  • Informationsbedürfnisse Von Menschen Mit Sehbehinderungen in Autonomen Fahrzeugen

Wissenschaftliche Aktivitäten

I reviewed more than 100 papers and Late-Breaking Works, for example, for:

Conference Reviewer: MobileHCI '19'21'22, AutoUI '19'20'21'22, CHI PLAY '19'20'21'22, CHI'20'21'22, TEI'21, HRI'21'22, IUI'21, DIS'21'22, ICMI'21'22, C&C'21'22, ISCW'21, ISMAR'21, IASDR'21, ISS'21, VRST '21, EICS'22, SUI'21, HAI'21, IEEE VR'22, OzCHI'22, ETRA'22, IDC'22, ICWSM'22, IMX'22, NordiCHI'22

Journal Reviewer: Frontiers in Human Dynamics, CSCW '21'22

Book Reviewer: User Experience Design in the Era of Automated Driving

 

For this, I received some awards:

1 "Special Recognition for Outstanding Reviews" CHI 2021

1 "Special Recognition for Outstanding Reviews" CHI 2022

1 "Special Recognition for Outstanding Reviews" AutoUI 2021

 

I also helped to organize some conferences:

Organizer LBW: CHI'21'22 Late Breaking Work AC,

Organizer Full Paper: AutoUI'21'22, MuC'22 Full Paper AC

Industrielle Kooperationen

mercedes-benz elektrobit avl cerence infineon

Publikationen

2022

45.
M. Colley, J. O. Rixen, W. I. Pellegrino and E. Rukzio, "(Eco-)Logical to Compare? - Utilizing Peer Comparison to Encourage Ecological Driving in Manual and Automated Driving", Proceedings of the 14th International Conference on Automotive User Interfaces and Interactive Vehicular Applications (AutomotiveUI ’22) (conditionally accepted), 09 2022. ACM.
44.
M. Woide, M. Colley, N. Damm and E. Rukzio, "Effect of System Capability Verification on Conflict, Trust, and Behavior in Automated Vehicles", Proceedings of the 14th International Conference on Automotive User Interfaces and Interactive Vehicular Applications (AutomotiveUI ’22) (conditionally accepted), 09 2022. ACM.
43.
A. Stampf, M. Colley and E. Rukzio, "Towards Implicit Interaction in Highly Automated Vehicles - A Systematic Literature Review", Proceedings of the 24rd International Conference on Mobile Human-Computer Interaction (MobileHCI '22), 09 2022. ACM.
42.
M. Colley, T. Fabian and E. Rukzio, "Investigating the Effects of External Communication and Automation Behavior on Manual Drivers at Intersections", Proceedings of the 24rd International Conference on Mobile Human-Computer Interaction (MobileHCI '22), 09 2022. ACM.
41.
P. Hock, M. Colley, A. Askari, T. Wagner, M. Baumann and E. Rukzio, "Introducing VAMPIRE -- Using Kinaesthetic Feedback in Virtual Reality for Automated Driving Experiments", Proceedings of the 14th International Conference on Automotive User Interfaces and Interactive Vehicular Applications (AutomotiveUI ’22) (conditionally accepted) Joint First Authors, 09 2022. ACM.
40.
M. Haimerl, M. Colley and A. Riener, "Evaluation of Common External Communication Concepts of Automated Vehicles for People With Intellectual Disabilities", Proceedings of the 24rd International Conference on Mobile Human-Computer Interaction (MobileHCI '22), 09 2022. ACM.
39.
M. Colley, J. Britten, S. Demharter, T. Hisir and E. Rukzio, "Feedback Strategies for Crowded Intersections in Automated Traffic --- A Desirable Future?", Proceedings of the 14th International Conference on Automotive User Interfaces and Interactive Vehicular Applications (AutomotiveUI ’22) (conditionally accepted), 09 2022. ACM.
38.
T. Müller, M. Colley, G. Dogru and E. Rukzio, "AR4CAD: Creation and Exploration of a Taxonomy of Augmented Reality Visualization for Connected Automated Driving", Proceedings of the 24rd International Conference on Mobile Human-Computer Interaction (MobileHCI '22), Joint First Authors, 09 2022. ACM.
37.
M. Colley, B. Wankmüller and E. Rukzio, "A Systematic Evaluation of Solutions for the Final 100m Challenge of Highly Automated Vehicles", Proceedings of the 24rd International Conference on Mobile Human-Computer Interaction (MobileHCI '22), 09 2022. ACM.
36.
P. Jansen, M. Colley and E. Rukzio, "A Design Space for Human Sensor and Actuator Focused In-Vehicle Interaction Based on a Systematic Literature Review", Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies (IMWUT), vol. 6, pp. 1-51, Jun. 2022. ACM.
DOI:10.1145/3534617
Weblink:https://in-vehicle-interaction-design-space.onrender.com/
Datei:fileadmin/website_uni_ulm/iui.inst.100/1-hci/hci-paper/2022/IMWUT_2022_In-Vehicle_Interaction_Jansen.pdf
35.
J. O. Rixen, M. Colley, A. Askari, J. Gugenheimer and E. Rukzio, "Consent in the Age of AR: Investigating The Comfort With Displaying Personal Information in Augmented Reality", In Proc. of CHI 2022 (SIGCHI Conference on Human Factors in Computing Systems), 05 2022. ACM.
DOI:10.1145/3491102.3502140
Weblink:https://www.youtube.com/watch?v=kOfnshoI9XY
Datei:fileadmin/website_uni_ulm/iui.inst.100/institut/Papers/Prof_Rukzio/2022/CHI2022_Information_Augmentation_Ole_final.pdf
34.
M. Colley, E. Bajrovic and E. Rukzio, "Effects of Pedestrian Behavior, Time Pressure, and Repeated Exposure on Crossing Decisions in Front of Automated Vehicles Equipped with External Communication", In Proc. of CHI 2022 (SIGCHI Conference on Human Factors in Computing Systems), 05 2022. ACM.
DOI:10.1145/3491102.3517571
Weblink:https://www.youtube.com/watch?v=L7xv6sGweVY _blank
Datei:fileadmin/website_uni_ulm/iui.inst.100/institut/Papers/Prof_Rukzio/2022/CHI2022_Effects_Pedestrian_Group_final.pdf
33.
M. Colley and E. Rukzio, "Challenges of Explainability, Cooperation, and External Communication of Automated Vehicles", CHI 2022 Workshop - Engaging with Automation: Understanding and Designing for Operation, Appropriation, and Behaviour Change, Mai 2022.
Weblink:t3://file?uid=454506
32.
M. Colley, T. Kränzle and E. Rukzio, "Accessibility-Related Publication Distribution in HCI Based on a Meta-Analysis", In Extended Abstracts of CHI 2022 (SIGCHI Conference on Human Factors in Computing Systems), 05 2022. ACM.
Weblink:t3://file?uid=454504
31.
M. Colley, M. Rädler, J. Glimmann and E. Rukzio, "Effects of Scene Detection, Scene Prediction, and Maneuver Planning Visualizations on Trust, Situation Awareness, and Cognitive Load in Highly Automated Vehicles", Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies (IMWUT) (conditionally accepted), 04 2022. ACM.
30.
M. Colley, S. Mytilineos, M. Walch, E. Rukzio and J. Gugenheimer, "Requirements for the Interaction With Highly Automated Construction Site Delivery Trucks", Frontiers in Human Dynamics, section Digital Impacts, 02 2022. Frontiers.
DOI:10.3389/fhumd.2022.794890
Weblink:https://www.frontiersin.org/article/10.3389/fhumd.2022.794890 _blank
Datei:pdfhttps://oparu.uni-ulm.de/xmlui/bitstream/handle/123456789/41966/Colley_2022.pdf
29.
M. Colley, S. Pickl, F. Uhlig and E. Rukzio, "Exploring the Social Context of Collaborative Driving", 2022.
Weblink:https://arxiv.org/abs/2201.11028
28.
M. Colley, B. Wankmüller, T. Mend, T. Väth, E. Rukzio and J. Gugenheimer, "User Gesticulation Inside an Autonomous Vehicle with External Communication can Cause Confusion in Pedestrians and a Lower Willingness to Cross", Transportation Research Part F: Traffic Psychology and Behaviour, pp. 120-137, 2022. Elsevier, https://www.sciencedirect.com/science/article/pii/S1369847822000523?dgcid=author.
DOI:10.1016/j.trf.2022.03.011

2021

27.
M. Colley, P. Jansen, E. Rukzio and J. Gugenheimer, "SwiVR-Car-Seat: Exploring Vehicle Motion Effects on Interaction Quality in Virtual Reality Automated Driving Using a Motorized Swivel Seat", Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies (IMWUT), vol. 5, pp. 1-26, Dez. 2021. ACM.
DOI:10.1145/3494968
Weblink:https://youtu.be/hvxtrgGAaUE
Datei:fileadmin/website_uni_ulm/iui.inst.100/1-hci/hci-paper/2021/IMWUT_2021_SwiVR_Car_Seat_Colley.pdf
26.
M. Haimerl and M. Colley, "„Du auch hier?“ – Wenn Menschen mit Einschränkungen auf autonome Fahrzeuge treffen", [23.11.2021].
Weblink:https://gi-radar.de/299-informatik-und-inklusion/
25.
M. Colley, J. H. Belz and E. Rukzio, "Investigating the Effects of Feedback Communication of Autonomous Vehicles", Proceedings of the 13th International Conference on Automotive User Interfaces and Interactive Vehicular Applications (AutomotiveUI ’21), Sep. 2021. ACM.
DOI:10.1145/3409118.3475133
Weblink:https://youtu.be/P-dD9urwuGE
Datei:fileadmin/website_uni_ulm/iui.inst.100/1-hci/hci-paper/2021/AutoUI2021_Interaction_Answer_Colley.pdf
24.
M. Colley, A. Askari, M. Walch, M. Woide and E. Rukzio, "ORIAS: On-The-Fly Object Identification and Action Selection for Highly Automated Vehicles", Proceedings of the 13th International Conference on Automotive User Interfaces and Interactive Vehicular Applications (AutomotiveUI ’21), Sep. 2021. ACM.
DOI:10.1145/3409118.3475134
Weblink:https://youtu.be/F5DZWqwjIUo
Datei:fileadmin/website_uni_ulm/iui.inst.100/1-hci/hci-paper/2021/AutoUI2021_ORIAS_Colley.pdf
23.
M. Colley, M. Lanzer, J. H. Belz, M. Walch and E. Rukzio, "Evaluating the Impact of Decals on Driver Stereotype Perception and Exploration of Personalization of Automated Vehicles via Digital Decals", Proceedings of the 13th International Conference on Automotive User Interfaces and Interactive Vehicular Applications (AutomotiveUI ’21), Sep. 2021. ACM.
DOI:10.1145/3409118.3475132
Weblink:https://youtu.be/jCXT337OIVE
Datei:fileadmin/website_uni_ulm/iui.inst.100/1-hci/hci-paper/2021/AutoUI2021_Whats_in_the_Look_Colley.pdf
22.
M. Colley, S. Krauß, M. Lanzer and E. Rukzio, "How Should Automated Vehicles Communicate Critical Situations? A Comparative Analysis of Visualization Concepts", Proc. ACM Interact. Mob. Wearable Ubiquitous Technol.,, Sep. 2021. ACM.
DOI:10.1145/3478111
Datei:fileadmin/website_uni_ulm/iui.inst.100/1-hci/hci-paper/2021/IMWUT2021_Critical_Situations_Colley.pdf
21.
J. O. Rixen, T. Hirzle, M. Colley, Y. Etzel, E. Rukzio and J. Gugenheimer, "Exploring Augmented Visual Alterations in Interpersonal Communication", In Proc. of CHI 2021 (SIGCHI Conference on Human Factors in Computing Systems), Mai 2021. ACM.
DOI:10.1145/3411764.3445597
Weblink:https://www.youtube.com/watch?v=Mhlem-U439Q
Datei:fileadmin/website_uni_ulm/iui.inst.100/1-hci/hci-paper/2021/CHI_2021_AR_Color_Augmentation.pdf