Rejestracja, transkrypcja i tagowanie mowy oraz gestów w narracji dzieci i dorosłych

Abstract

In the present paper, the experimental procedure, the details of sound and video recording set-up as well as the system for speech and gesture transciption and coding used in the Polish Cartoon Narration Corpus (PCNC) project are described. The audio-visual data come from a cartoon narration task performed by both children and adults. The recordings are transcribed orthographically and phonemically, and labelled for selected phenomena on a number of levels, including gesture, lexicon, prosody, and dialogue acts.

Gdzie jest metafora? Sposoby reprezentowania gestów metaforycznych w dialogu

“…Analiza materiału skłania do postawienia pytania o korelację między werbalnym a gestycznym trybem, które jako całość tworzą pełną semantycznie wypowiedź, podczas obrazowania treści metaforycznych. Przyjmuje się (w ujęciu opartym na formie), że granica danego gestu, a ściślej mówiąc, danej sekwencji gestowej (gesture unit), daje się wskazać w miejscu, w którym mówiący przechodzi do pozycji wyjściowej lub innej niż wyjściowa pozycji spoczynku 21 (Kendon, 2004;Müller, 2014;Karpiński, Jarmołowicz-Nowikow i in., 2008;Jarmołowicz-Nowikow, 2019), jednak granica ta w przypadku omawianych wyżej gestów metaforycznych nie zawsze pokrywa się z warstwą werbalną wypowiedzi. Możliwe, że pojęcia, które są z perspektywy mówiącego szczególnie istotne, będą obrazowane gestycznie dłużej niż tylko podczas trwania wypowiedzi metaforycznej, jak w przypadku omówionego gestu hierarchii (przykład 3), lub będą reduplikowane, jak w przypadku gestu fali (przykład 2), choć taki wniosek wymagałby pełniejszego potwierdzenia w bazie materiałowej 22 .…”