Gesti delle mani, fissazione oculare e valutazione del parlante di un video-messaggio persuasivo

Gestures of a speaker are differently perceived and processed by receivers according to their (in)congruence with the speech (Kelly et al., 2007). Hand movements, moreover, differently affect audience evaluation of the speaker, in particular for competence but not for warmth traits, and for speaker's and message's persuasiveness (Maricchiolo et al., 2009). More studies are now needed in order to understand the psychological processes accounting for these perceptual and evaluation effects. Among the possible processes, focal attention (Yantis, 1998), as measured through eye-fixations (Levi et al., 1985), could be a relevant one as a process which can be operationalized and measured in a relatively easy way (Duchowski, 2007). So far, very few studies have been conducted on the audience eye-fixation of a speaker's hand gesture: just qualitative evidence has been published (e.g., Gullmerg & Holmqvist, 2006); while no studies have been carried out in order to record simultaneously eye-fixation and speaker and message evaluations. The hypotheses of the present study are: a) different kind of gestures/movements have different effects on competence and persuasiveness evaluations, according to the pattern known from the literature; b) different kind of gestures/movements are differently fixated, according to a pattern where most efficacious (speech-congruent) gestures/movements would receive less focal attention (e.g., they could be processed more automatically) than less efficacious gestures/hand movements. An experiment on 50 undergraduates was carried out to evaluate the effects of different hand gestures and movements on receivers’ eye-fixations and evaluation of the speaker of a persuasive video-message. In the present study, data were collected while viewing four ad hoc video-messages. In each video the speaker performed only one kind of hand movements along four speech-congruence levels: 1) only ideational gestures (most speech-congruent), 2) only conversational gestures, 3) only object-adaptors, 4) only self-adaptors (least speech-congruent movements). The amount of receivers’ eye-fixations during the vision and the receivers’ evaluations at the end were measured. Statistical analyses confirm that speech-incongruent gestures were more fixated by the receiver (hypothesis b) and subsequently evaluated as less effective (in terms of speaker competence) and less persuasive than speech-congruent gestures (hypothesis a). Such results suggest that, although speech-congruent gestures are not foveally fixated (probably because they are perceived as integrated with the speech), they are however processed by the receivers, because these gestures allow perceiving the speaker as more competent and persuasive. Adaptors, characterized by lack of congruence with either content or structure of the speech, are more fixated: therefore they receive more focal attention being therefore treated as information out of the context (Wright & Ward, 2008). Future experiments could try to manipulate eye fixation on a single kind of gesture/movement in order to assess causal role and mediation of gesture eye-fixation with respect to competence and persuasiveness audience evaluations. -

I gesti di un parlante sono percepiti ed elaborati differentemente dai riceventi secondo la loro (in)coerenza con il parlato (Kelly et al., 2007). I movimenti delle mani, inoltre, influenzano in modo diverso le valutazioni dell’audience rispetto al parlante, in particolare in termini di competenza, ma non in termini di calore o in termini di persuasività (Maricchiolo et al., 2009). Sono necessari dunque studi che approfondiscano la conoscenza dei processi psicologici che portano a questi effetti sulla percezione e valutazione. Tra questi processi, l’attenzione focale (Yantis, 1998), misurata attraverso le fissazioni oculari (Levi et al. 1985), potrebbe essere considerato un processo rilevante e facilmente operazionalizzabile e misurabile (Duchowski, 2007). Nonostante questo, sono stati condotti ancora pochi studi sulla fissazione oculare dei gesti di un parlante da parte dell’audience: sono state pubblicate solo delle evidenze qualitative (es., Gullmerg & Holmqvist, 2006); ma non sono stati ancora condotti studi volti a registrare contemporaneamente fissazioni oculari e valutazioni del parlante e del messaggio, che è invece l’obiettivo dello studio presentato. Le ipotesi del presente studio infatti sono: a) diversi tipi di gesti hanno diversi effetti sulle valutazioni di competenza e persuasività secondo il pattern conosciuto in letteratura; b) diversi tipi di gesti sono fissati differentemente, cioè i gesti più coerenti con il discorso, dunque più efficaci riceverebbero meno attenzione focale (dunque meno fissazioni; ad esempio, potrebbero essere elaborati automaticamente) rispetto ai movimenti delle mani meno efficaci. È stato condotto un esperimento su 50 studenti per valutare gli effetti dei diversi gesti e movimenti delle mani sulle fissazioni dei riceventi e sulle loro valutazioni del parlante di un messaggio a scopo persuasivo. In questo studi i dati sono stati raccolti mentre i soggetti visionavano uno dei quattro messaggi costruiti ad hoc. In ciascun messaggio il parlante produceva un unico tipo di gesti delle mani secondo 4 livelli di congruenza con il parlato: 1) solo gesti ideativi (molto coerenti con il parlato), 2) solo gesti conversazionali, 3) solo oggetto adattatori; 4) solo auto-adattatori (meno congruenti con il parlato). La quantità di fissazioni oculari era misurata durante la visione del video messaggio, mentre le valutazioni, attraverso un questionario, alla fine. I risultati delle analisi statistiche confermano che i gesti incongruenti con il verbale sono più fissati dei congruenti (ipotesi b) e valutati come meno efficaci in termini di competenza e meno persuasivi rispetto ai più congruenti con il parlato (ipotesi a). questi risultati suggeriscono che, nonostante i gesti congruenti con il parlato non ricevano una fissazione foveale (probabilmente perché percepiti come integrati con il parlato), essi sono comunque elaborati dal ricevente, poiché essi fanno percepire il parlante come più competente e persuasivo. Gli adattatori, caratterizzati da una mancanza di congruenza sia con il contenuto sia con la struttura del parlato, sono maggiormente fissati: quindi ricevono maggiore attenzione focale essendo trattati come informazioni fuori dal contesto (Wright & Ward, 2008). Esperimenti futuri potrebbero tentare di manipolare la fissazione oculare su singoli tipi di gesti al fine di valutare il ruolo causale e/o di mediazione della fissazione dei gesti sulle valutazioni di competenza e persuasività del parlante da parte dell’audience. -