A4 Artikkeli konferenssijulkaisussa
What Comes First : Combining Motion Capture and Eye Tracking Data to Study the Order of Articulators in Constructed Action in Sign Language Narratives (2020)

Jantunen, T., Puupponen, A., & Burger, B. (2020). What Comes First : Combining Motion Capture and Eye Tracking Data to Study the Order of Articulators in Constructed Action in Sign Language Narratives. In N. Calzolari, F. Béchet, P. Blache, K. Choukri, C. Cieri, T. Declerck, S. Goggi, H. Isahara, B. Maegaard, J. Mariani, H. Mazo, A. Moreno, J. Odijk, & S. Piperidis (Eds.), LREC 2020 : Proceedings of the 12th Conference on Language Resources and Evaluation (pp. 6003-6007). European Language Resources Association. LREC proceedings. https://www.aclweb.org/anthology/2020.lrec-1.735.pdf

JYU-tekijät tai -toimittajat

Julkaisun tiedot

Julkaisun kaikki tekijät tai toimittajat: Jantunen, Tommi; Puupponen, Anna; Burger, Birgitta

Emojulkaisu: LREC 2020 : Proceedings of the 12th Conference on Language Resources and Evaluation

Emojulkaisun toimittajat: Calzolari, Nicoletta; Béchet, Frédéric; Blache, Philippe; Choukri, Khalid; Cieri, Christopher; Declerck, Thierry; Goggi, Sara; Isahara, Hitoshi; Maegaard, Bente; Mariani, Joseph; Mazo, Hélène; Moreno, Asuncion; Odijk, Jan; Piperidis, Stelios

Konferenssin paikka ja aika: Marseille, France, 11.-16.5.2020

ISBN: 979-10-95546-34-4

Lehti tai sarja: LREC proceedings

eISSN: 2522-2686

Julkaisuvuosi: 2020

Artikkelin sivunumerot: 6003-6007

Kirjan kokonaissivumäärä: 7353

Kustantaja: European Language Resources Association

Julkaisumaa: Ranska

Julkaisun kieli: englanti

Pysyvä verkko-osoite: https://www.aclweb.org/anthology/2020.lrec-1.735.pdf

Julkaisun avoin saatavuus: Avoimesti saatavilla

Julkaisukanavan avoin saatavuus: Kokonaan avoin julkaisukanava

Julkaisu on rinnakkaistallennettu (JYX): https://jyx.jyu.fi/handle/123456789/71022

Tiivistelmä

We use synchronized 120 fps motion capture and 50 fps eye tracking data from two native signers to investigate the temporal order in which the dominant hand, the head, the chest and the eyes start producing overt constructed action from regular narration in seven short Finnish Sign Language stories. From the material, we derive a sample of ten instances of regular narration to overt constructed action transfers in ELAN which we then further process and analyze in Matlab. The results indicate that the temporal order of articulators shows both contextual and individual variation but that there are also repeated patterns which are similar across all the analyzed sequences and signers. Most notably, when the discourse strategy changes from regular narration to overt constructed action, the head and the eyes tend to take the leading role, and the chest and the dominant hand tend to start acting last. Consequences of the findings are discussed.

YSO-asiasanat: viittomakieli; suomalainen viittomakieli; liikkeenkaappaus; katseenseuranta

Liittyvät organisaatiot

Hankkeet, joissa julkaisu on tehty

Liittyvät tutkimusaineistot

OKM-raportointi: Kyllä

VIRTA-lähetysvuosi: 2020

JUFO-taso: 1