Руки говорят: ученый объяснил, как жесты помогают выражать мысли

Фото: сгенерировано искусственным интеллектом

НИА "Нижний Новгород" - Инна Королева

Почему люди жестикулируют даже тогда, когда их никто не видит, и как движения рук помогают формулировать мысли? Об этом на Международной конференции по когнитивной науке (16+) рассказал профессор из Амстердама Алан Ченки. Лекцию посетил корреспондент НИА «Нижний Новгород».

Что жесты говорят за нас

В центре исследований Ченки — речевые жесты, то есть движения рук, которые люди совершают во время разговора.

Ученый выделяет две основные функции таких жестов. Репрезентирующие изображают события, действия или предметы. Прагматические ничего не изображают, но помогают человеку выразить отношение к сказанному — например, согласие, несогласие, сомнение или уверенность.

При этом один и тот же жест может выполнять сразу несколько функций.

Отдельную группу составляют жесты-эмблемы — закрепленные в культуре движения с достаточно устойчивым значением. К ним относятся, например, кивок, пожатие плечами или жест «окей». Они могут использоваться самостоятельно, без слов.

Большинство жестов повторяются

В рамках проекта, поддержанного Российским научным фондом и выполненного совместно с Московским государственным лингвистическим университетом, команда Ченки изучала диалоги на русском и бразильском португальском языках.

Участники смотрели короткое видео об искусственном интеллекте, а затем в течение 15 минут обсуждали свое отношение к теме.

Исследование показало, что подавляющее большинство жестов в повседневном разговоре — повторяющиеся. С их помощью люди не столько изображают события, сколько выражают свое отношение к тому, о чем говорят.

«Самый распространенный тип рекуррентных жестов как в русском, так и бразильском языках — „жест предложения“: рука поворачивается ладонью вверх, пальцы вытягиваются. Также широко используется жест от себя для выражения отрицания или отвержения», — объясняет Ченки.

При этом набор жестов зависит от культуры. Например, известный итальянский жест «грапполо» встречается и в Бразилии, тогда как в России и США его практически не используют.

Даже одинаковые движения могут выполнять разные функции. Так, «жест-удар» у русскоговорящих используется для акцента или подведения итога мысли. У бразильцев движение несколько отличается и служит способом завершить мысль.

Зачем мы жестикулируем, когда нас никто не видит

Жесты нужны не только собеседнику. По словам Ченки, люди часто жестикулируют для себя, поскольку движения помогают формировать мысли.

«Чаще всего мы жестикулируем для себя, если это помогает нам формировать свои мысли. Но иногда мы жестикулируем и для других, чтобы объяснить что-то более подробно. Разница не такая большая, но для других мы жестикулируем ярче и делаем более широкие движения».

Это заметно на примере синхронных переводчиков. Даже находясь в кабине, где их никто не видит, они используют прагматические жесты. В некоторых школах перевода жестикулировать запрещают, однако переводчики все равно могут делать небольшие движения — вероятно, потому что жесты помогают им производить речь.

Визуальная информация важна и для слушателя. Ченки отмечает: слушая радио или подкаст, человек понимает содержание речи и без изображения говорящего, однако хуже считывает его позиционирование. При этом отношение говорящего передается не только жестами и мимикой, но также голосом и интонацией.

Жесты и язык

На вопрос о том, что появилось раньше — речь или жестикуляция, — Ченки отвечает осторожно. По его словам, есть основания предполагать, что жесты и звучащий язык развивались вместе.

Жесты также могут меняться под влиянием культурной среды. Ченки приводит исследования иммигрантов и их детей в Нью-Йорке: оказалось, что жесты детей быстрее адаптируются к новой культуре.

При этом осваивать движения дети начинают довольно рано. Сначала появляются указательные жесты, позднее — более сложные движения, изображающие предметы. Некоторые повторяющиеся жесты дети также перенимают у взрослых в раннем возрасте — например, разведение рук, означающее незнание ответа.

Напомним, что в рамках этой же конференции с лекцией выступила доктор биологических и филологических наук, заведующая лабораторией когнитивных исследований СПбГУ Татьяна Черниговская. Можем ли мы доверять собственному мозгу, есть ли сознание у комара и способен ли искусственный интеллект по-настоящему понимать человека? Читайте в нашем материале.