Challenges in designing digital interfaces for the study of multimodal phenomena

O’Halloran, Kay; Tan, Sabine; Smith, Bradley A.; Podlasov, Alexey

doi:10.1075/idj.18.1.02hal

Cited by 35 publications

(14 citation statements)

References 9 publications

Supporting

Mentioning

Contrasting

Unclassified

Order By: Relevance

“…Finally, we must consider that MR is not limited to visual interfaces, but it may also occasionally include audio and haptic feedback, and due to its interdisciplinary nature, every application and area has different concerns and needs [40]. This way, general information design principles might be proposed but detailed analysis is still needed for each case.…”

Section: Challengesmentioning

confidence: 96%

“…Although we might find several case studies in literature, few researches investigate how this technology is being used. Some researches propose guidelines with respect to technical characteristics of the display [36], others consider human-computer interaction principles [37,38], some analyse the representation of the environment [39], while other focus on interface issues [40]. Information design issues and their relations with MR, however, remain mostly unexplored.…”

Section: Information Design and Mediated Realitymentioning

confidence: 99%

See 1 more Smart Citation

Designing Information for Mediated Reality Systems

Vasconcelos

Breyer

Reis

et al. 2014

Design, User Experience, and Usability. User Experience Design for Diverse Interaction Platforms and Environments

View full text Add to dashboard Cite

Abstract. Mediated reality systems introduce the possibility to alter users' perception of the surrounding environment by adding or removing information. These particular innovative features made this technology attractive for several adjacent fields. However, despite their direct impact on the presentation of information, mediated reality systems are still poorly explored by information designers. Over the years, information design researchers have investigated and proposed tools and practices when planning information for different platforms and contexts. With respect to technical operations, visual instructions are very effective to convey information, and therefore a great opportunity for technology aided operations. This work establishes a dialogue between information design and mediated reality systems, and introduces some of the several concerns of this joint context. Based on correlated research, we identify general principles, challenges and opportunities for mediated reality applications, and for information designers willing to use them. Finally, we also introduce an early-stage system for technical operations as an opportunity to take further lessons and establish detailed recommendations.

show abstract

Section: Challengesmentioning

confidence: 96%

Section: Information Design and Mediated Realitymentioning

confidence: 99%

Designing Information for Mediated Reality Systems

Vasconcelos

Breyer

Reis

et al. 2014

Design, User Experience, and Usability. User Experience Design for Diverse Interaction Platforms and Environments

View full text Add to dashboard Cite

show abstract

“…Un método de abordaje de esta complejidad consiste en desarrollar plataformas mediáticas digitales interactivas específicamente diseñadas para el ADM. Más aún, el desarrollo de programas de computación como herramienta metasemiótica para el análisis multimodal constituye en sí mismo un espacio de teorización y desarrollo del ADM. En la actualidad existen herramientas de anotación multimodal (Rohlfing et al, 2006) y se está trabajando para desarrollar un programa interactivo para el ADM que permita no solo realizar anotaciones sino que incluya opciones de visualización y técnicas de análisis matemático (O'Halloran, Tan, Smith & Podlasov, 2010). Solo será posible avanzar hacia nuestro objetivo de comprender los patrones y las tendencias de la tecnología, los textos, los contextos y la cultura trabajando de manera colaborativa e interdisciplinaria.…”

Section: Nuevos Rumbos Del Admunclassified

Análisis del discurso multimodal

O’Halloran¹

2016

RALED

View full text Add to dashboard Cite

El análisis del discurso multimodal (ADM) constituye un paradigma emergente en el campo de los estudios del discurso que amplía el estudio del lenguaje per se al estudio del lenguaje en combinación con otros recursos. En este trabajo se exponen los motivos por los que emerge este campo en el área de la lingüística, se plantean los principales desafíos y la multiplicidad de enfoques de los análisis de discursos multimodales y se analizan en detalle los conceptos específicos. Luego, se desarrolla el análisis multimodal de un segmento de discurso televisivo. A modo de conclusión, se considera que el principal desafío del ADM es resolver los detalles y la complejidad que requiere anotar, analizar, investigar y recuperar los patrones semánticos multimodales. Por este motivo se propone, como uno de los posibles métodos de abordaje, desarrollar plataformas mediáticas digitales interactivas. Por último, se considera que solo será posible avanzar hacia el objetivo de comprender los patrones y las tendencias de la tecnología, los textos, los contextos y la cultura trabajando de manera colaborativa e interdisciplinaria.

show abstract

“…Estos nuevos formatos deben permitir, entre otros, la recuperación de información proveniente desde los múltiples sistemas semióticos que conforman un texto escrito tanto estático como dinámico; incluso deben posibilitar el tratamiento computacional del corpus desde diversas perspectivas, las cuales puedan -entre otras-permitir la identificación y clasificación automática de artefactos (Bateman et. al., 2004;Bateman, 2008;O'Halloran et al, 2010).…”

Section: Conclusionesunclassified

Artefactos multisemióticos y discurso académico de la Economía: Construcción de conocimientos en el género Manual

Boudon

Parodi

2014

Rev. signos

View full text Add to dashboard Cite

ResumenIdentificar los géneros que vehiculan el conocimiento disciplinar y describir sus rasgos prototípicos, asumiendo su estatus multisemiótico, se constituyen como tareas primordiales para entender el funcionamiento del discurso académico y los procesos discursivos a partir de los cuales un estudiante se hace parte de una comunidad académica particular. Desde este marco, nos interesa el acceso al conocimiento especializado de la Economía, considerando un género académico en específico: el Manual universitario. Los objetivos propuestos para esta investigación son identificar y describir los artefactos multisemióticos que participan en la construcción de significado dentro de un grupo de 10 manuales que introducen a los estudiantes de primer año al estudio de la Economía. Se busca, además, establecer la frecuencia de ocurrencia de estos artefactos dentro del corpus de estudio. La aplicación de la propuesta metodológica de Parodi (2010a) permitió identificar siete artefactos, a saber, Complejo Estadístico, Esquema, Fórmula, Gráfico, Ícono, Ilustración y Tabla. Los hallazgos reportados revelan que el discurso académico de la Economía que se construye, principalmente, a través de este género, emplea, de preferencia, fórmulas, gráficos y tablas, todos ellos artefactos multisemióticos de alta ocurrencia que apoyan el propósito comunicativo pedagógico del género Manual.Palabras Clave: Artefactos multisemióticos, discurso académico, economía, manual universitario. INTRODUCCIÓNExiste consenso en la literatura especializada en que el paso por la universidad constituye un proceso a través del cual el estudiante debe aprender las características discursivas de su comunidad académica, si quiere hacerse parte de ella y concluir este proceso transformador con éxito. Debido a esto, el acceso al conocimiento especializado difundido en una disciplina como parte del discurso académico despierta poderoso interés en diversos investigadores con diferentes puntos de vista (Becher, 1994;Bondi, 1995Bondi, , 1999Mauranen, 2003;Parodi, 2008a;Bolívar & Parodi, 2014; entre otros). En este sentido, indagar en los géneros que vehiculan el conocimiento disciplinar y sus rasgos, asumiendo su estatus multisemiótico, se erige como una tarea primordial para entender el funcionamiento del discurso académico y el proceso por medio del cual un sujeto se hace parte de una comunidad académica específica. A partir de esto, nuestra preocupación radica en el acceso al conocimiento especializado en la Economía, considerando un género específico: el Manual. Este género, dentro del Corpus PUCV-UCSC-2013 (Proyecto FONDECYT 1130033), ocupa un lugar preponderante en términos cuantitativos, dado que, tomando en consideración la bibliografía obligatoria declarada en los programas de las asignaturas, su frecuencia alcanza un 68%.Ahora bien, el Manual y sobre todo el de Economía, a pesar de su naturaleza altamente multisemiótica, no ha sido objeto de estudios en que se indague en los artefactos que lo componen; ha existido, eso sí, un foco de interés en los rasg...

show abstract

Challenges in designing digital interfaces for the study of multimodal phenomena

Cited by 35 publications

References 9 publications

Designing Information for Mediated Reality Systems

Designing Information for Mediated Reality Systems

Análisis del discurso multimodal

Artefactos multisemióticos y discurso académico de la Economía: Construcción de conocimientos en el género Manual

Contact Info

Product

Resources

About