An Evaluation Framework for User Experience Using Eye Tracking, Mouse Tracking, Keyboard Input, and Artificial Intelligence: A Case Study

Souza, Kennedy Edson Silva de; Aviz, Igor L.; Junior, Harold Dias de Mello; Figueiredo, Karla; Vellasco, Marley; Costa, Fernando Augusto Ribeiro; Seruffo, Marcos César da Rocha

doi:10.1080/10447318.2021.1960092

Cited by 18 publications

(9 citation statements)

References 43 publications

Supporting

Mentioning

Contrasting

Unclassified

Order By: Relevance

“…Enquanto perspectiva de uso acadêmico, a ferramenta subsidiou o estudo de de Souza et al [15]. Os autores estabeleceram uma estrutura que emprega métodos para rastreamento de olhos e mouse, entrada de teclado, questionário de autoavaliação e algoritmos de inteligência artificial para avaliar a UX e categorizar os usuários em termos de perfis de desempenho.…”

Section: Perspectivas Da Ferramentaunclassified

“…A UX tem sido uma temática discutida por diferentes frentes de estudos, no campo do marketing, comunicação, design, informática, entre outras. Isso porque a UX requer uma compreensão mais aprofundada dos usuários e consumidores, buscando compreender suas necessidades, o que eles valorizam, bem como identificar suas habilidades e limitações [15].…”

Section: Introductionunclassified

See 1 more Smart Citation

UX-Tracking: Web and Multimodal Tool for User Experience Evaluation

Lima¹,

Moura²,

Alves³

et al. 2022

Anais Estendidos Do XXVIII Simpósio Brasileiro De Sistemas Multimídia E Web (WebMedia 2022)

View full text Add to dashboard Cite

Different markets have increasingly sought to offer personalized experiences in the use of their products and/or services. From that, this work presents UX-Tracking, a web tool for multimodal capture that adds a set of tracking techniques to allow User Experience (UX) evaluation. UX-Tracking allows you to simultaneously track mouse, eye, keyboard, history and, in the future, voice data in a single session with the user. This factor contributes to greater accuracy in UX assessments, since the interaction can be analyzed from different perspectives. As such, UX-Tranking is expected to be an alternative for researchers and professionals from academia and industry to improve quality of interaction with products and services in digital interfaces accessed via a web browser.

show abstract

Section: Perspectivas Da Ferramentaunclassified

Section: Introductionunclassified

UX-Tracking: Web and Multimodal Tool for User Experience Evaluation

Lima¹,

Moura²,

Alves³

et al. 2022

Anais Estendidos Do XXVIII Simpósio Brasileiro De Sistemas Multimídia E Web (WebMedia 2022)

View full text Add to dashboard Cite

show abstract

“…As avaliac ¸ões de UX podem ser realizadas por meio de diferentes técnicas e metodologias, como questionários, entrevistas, estudos de observac ¸ão, monitoramento de interac ¸ão, entre outros. Alguns estudos têm explorado a utilizac ¸ão de ferramentas de rastreio para a avaliac ¸ão de UX, tais como rastreamento dos olhos [Sari et al 2018], rastreamento de mouse [Souza et al 2022] e identificac ¸ão de expressões faciais [Munim et al 2017].…”

Section: Introduc ¸ãOunclassified

“…Algumas dessas ferramentas de avaliac ¸ão e monitoramento apresentam uma característica multimodal, reunindo um conjunto de funcionalidades em uma única ferramenta. Dessa forma, são capazes de coletar dados para análises estatísticas que permitem trac ¸ar padrões de uso, possibilitando desenvolver soluc ¸ões capazes de mensurar a atenc ¸ão do usuário, identificar e avaliar o comportamento, permitir adaptac ¸ões em tempo real, consequentemente oportunizando melhorias na UX [Aviz et al 2019, Souza et al 2022.…”

Section: Introduc ¸ãOunclassified

Perspectivas do monitoramento de Experiência de Usuário em diferentes domínios com ferramenta de captura multimodal

Zacarias

Lima²,

Seruffo³

et al. 2022

Anais Do XIII Workshop Sobre Aspectos Da Interação Humano-Computador Na Web Social (WAIHCWS 2022)

View full text Add to dashboard Cite

A Experiência de Usuário (UX, do inglês User Experience) consiste no conjunto de percepções, emoções e comportamentos que ocorrem durante a interação de usuários com produtos e serviços. O uso de ferramentas de captura multimodal auxilia na avaliação e compreensão da UX em diferentes domínios, proporcionando mais precisão no monitoramento do comportamento do usuário a partir de diferentes variáveis. Nesse contexto, o objetivo desta pesquisa é identificar e analisar as perspectivas de UX em diferentes domínios monitorados por ferramenta de captura multimodal. Para isso, é realizada uma síntese dos resultados de estudos com a ferramenta UX-Tracking em múltiplos contextos. Os resultados permitem inferir que a captura multimodal agrega maior versatilidade ao processo de avaliação de UX, podendo ser utilizada com vários perfis de usuários e no monitoramento de interação com tarefas de diversos níveis de complexidade. Com isso, espera-se contribuir com um conjunto de lições aprendidas e desafios de pesquisa no tema.

show abstract

“…Scholars report different techniques for evaluating UX. These methods include the "think aloud" method (user explain cognitive process as engaging with the user interface) (Basri, Adnan, & Baharin, 2019), an interaction experience questionnaire (Souza et al, 2021), usability, comprised of effectiveness, efficiency, satisfaction, learnability, and attractiveness (Schwaiger, Hammerl, Florian, & Leist, 2021) and usefulness, related to achieving the outcome the user set out to do (Chatzimina et al, 2021). Another measurement mechanism is eye-tracking where an eye-tracker device measures the point of gaze and the motion of the eye relative to a specific position on a computer interface e.g.…”

Section: User Experience Designmentioning

confidence: 99%

Key user experience principles in designing computer interfaces for emotionally vulnerable user groups

Preez¹,

Coleman²,

Smuts³

EPiC Series in Computing

View full text Add to dashboard Cite

The highly integrated Society 5.0 enables a ubiquitous computing world driven by exponential growth of digital technologies. User interface designers must therefore find new architectures and -designs in order to compete in a digital world. User experience (UX) design is the overarching term that expresses the philosophies, approaches, tools and techniques related to the two distinct yet overlapping fields of human-computer interaction (HCI) and user-centered design (UCD). In order to create reliable and realistic representations of key audience segments, personas are used as a mechanism to simulate the engagement with the computer interface. Personas for distressed and vulnerable users take cognizance of a user’s emotional state and potentially unique interaction with the computer interface. The purpose of this study is to consider the key UX principles in designing computer interfaces for vulnerable user groups. Two datasets, consisting of a systematic review of the literature and eye-tracking data, were collected and analyzed. We established 5 key UX principles relevant to vulnerable users entailing simplicity, support, action, engagement, look and feel, and constraint. By applying the key UX principles for vulnerable user groups, designers can ensure that a potentially emotional experience is managed well via the computer interface.

show abstract

An Evaluation Framework for User Experience Using Eye Tracking, Mouse Tracking, Keyboard Input, and Artificial Intelligence: A Case Study

Cited by 18 publications

References 43 publications

UX-Tracking: Web and Multimodal Tool for User Experience Evaluation

UX-Tracking: Web and Multimodal Tool for User Experience Evaluation

Perspectivas do monitoramento de Experiência de Usuário em diferentes domínios com ferramenta de captura multimodal

Key user experience principles in designing computer interfaces for emotionally vulnerable user groups

Contact Info

Product

Resources

About