MAX: A Method for Evaluating the Post-use User eXperience through Cards and a Board

Abstract

Abstract-User Experience (UX) is one of the most important attributes for the success and quality of a software product. UX explores how a person uses an application, and the emotional and behavioral consequences of such use. Although several UX evaluation methods allow gathering information on the reasons for a poor UX, some of them tend to make users feel uncomfortable, such as asking direct questions to shy users. This paper presents our proposal for evaluating UX, the Method for the Assessment of eXperience (MAX), which through cards and a board intends to motivate users to report their experience. The MAX method does not require experienced evaluators for performing the evaluation. Instead, this method is intended at software engineers willing to obtain data on UX and make users feel comfortable during the evaluation. To verify the feasibility of the MAX method from the point of view of users, we conducted a pilot study. The results showed that the MAX method has proven useful for evaluating the UX of finished or prototyped software applications. Also, we have made improvements in the method to meet users' needs when reporting their experience, and gathering data on factors affecting the UX.

Um Estudo Exploratório sobre Métodos de Avaliação de User Experience em Chatbots

“…Há pesquisas investigando como mensurar a UX e propondo diversos tipos de métodos de avaliac ¸ão de UX [Rivero and Conte 2017]. Dentre os principais métodos de avaliac ¸ão de UX que são comumente utilizados e adotados pelos engenheiros de software estão: AttrakDiff [Hassenzahl 2003], Think Aloud [Jaspers et al 2004] e MAX [Cavalcante 2015]. Cada um deles será brevemente explicado a seguir.…”

“…Nesse sentido, este trabalho apresenta um estudo experimental para avaliar a aplicabilidade e a viabilidade do uso de métodos de avaliac ¸ão da UX em um chatbot. Para isso, foram empregados três métodos de UX que podem ser utilizados por diferentes usuários e permitem avaliac ¸ão em sistemas não convencionais, como chatbots, sendo eles: AttrakDiff (Hassenzahl et al, 2003), Think Aloud (Jaspers et al, 2004) e MAX (Method for the Assessment of eXperience) (Cavalcante et al, 2015). Esses métodos são comumente conhecidos e adotados na literatura durante as avaliac ¸ões de UX (Lewis e Sauro, 2021), além de permitir que sejam adaptados ao contexto remoto (devido a pandemia da COVID-19), tanto para coleta e análise de dados.…”

Understanding UX Better: A New Technique to Go beyond Emotion Assessment

“…The Utility dimension helps assess whether the product has proved useful to users, i.e., by allowing the user to perform his tasks or serve a relevant function. Thus, the product becomes useful since it can help in aspects that can be important to users [31]. Table 7 shows the Utility' dimension items.…”

Mapa Cultural do Ceará: Redesign a partir da avaliação de usabilidade e experiência do usuário

“…Esses testes se estruturam num roteiro de cinco atividades 3 , em que sete sessões ocorreram de forma presencial em laboratório com a participação de dois avaliadores, anterior à pandemia de COVID-19, e três foram remotos com um avaliador, pelo serviço Google Meet e gravação por meio de programa externo, devido às medidas de distanciamento social. Após cada teste foi utilizado também o MAX (Method for the Assessment of eXperience) [Cavalcante, Rivero e Conte 2015], para avaliar a experiência dos usuários após utilizarem o sistema, através de cartas que representam os sentimentos destes, dispostas em um quadro com perguntas específicas. Esse método também foi adaptado para ser utilizado de forma remota, através da plataforma colaborativa de quadros em branco Miro.…”