In natural communication, humans enrich their utterances with pragmatic information indicating, e.g., what is important to them or what they are not certain about. We investigate whether and how virtual humans (VH) can employ this kind of meta-communication. In an empirical study we have identified three modifying functions that humans produce and perceive in multimodal utterance, one being to create or attenuate focus. In this paper we test whether such modifying functions are also observed in speech and/or gesture of a VH, and whether this changes the perception of a VH overall. Results suggest that, although the VH's behaviour is judged rather neutral overall, focusing is distinctively recognised, leads to better recall, and affects perceived competence. These effects are strongest if focus is created jointly by speech and gesture.
Story for stimulus video Controlled information structure Theme marked as: xxx Rheme/comment marked as: xxx Focus/contrast in rheme/comment marked as: xxx (gesture stroke is placed here in F+/F-/E-) Focus/contrast in theme marke das: xxx 1 Ich bin also Billie, der virtuelle Agent. 2 Virtuelle Agenten werden zum Beispiel in Assistenzsystemen eingesetzt. 3 Mit Hilfe dieser Systeme können Menschen barrierefrei mit Computern oder Maschinen kommunizieren. 4 Der technische Begriff für diesen barrierefreien Kontakt ist die Mensch-Maschine-Schnittstelle. 5 Als Assistenzsystem werde ich am CITEC eingesetzt. 6 Das CITEC ist ein Exzellenzcluster der Deutschen Forschungsgemeinschaft. 7 Die ersten drei Buchstaben in CITEC stehen für den Titel "Kognitive Interaktionstechnologie". 8 Gleichzeitig ist es auch ein Forschungsbau der Universität Bielefeld. 9 Dieser ist auf dem neuen Campus Nord der Uni angesiedelt. 10 Als Fachausdruck für virtuelle Agenten wie mich verwenden einige Forscher den Begriff "verkörperte konversationale Agenten". 11 Ein anderer Ausdruck für uns ist auch "virtuelle Menschen". 12 Wir sind Charaktere, die in einer virtuellen Welt grafisch repräsentiert werden. 13 Uns liegen umfangreiche kognitive Komponenten zugrunde.
scite is a Brooklyn-based organization that helps researchers better discover and understand research articles through Smart Citations–citations that display the context of the citation and describe whether the article provides supporting or contrasting evidence. scite is used by students and researchers from around the world and is funded in part by the National Science Foundation and the National Institute on Drug Abuse of the National Institutes of Health.