Когда мы говорим лицом к лицу, мы обмениваемся гораздо большим количеством сигналов, чем просто слова. Мы общаемся, используя наше положение тела, мимику и движения головы и глаз; но также и через ритмы, которые создаются, когда кто-то говорит. Хорошим примером является скорость, с которой мы производим слоги в непрерывной речи - о три-семь раз в секунду, В разговоре слушатель мелодии в к этому ритму и использует его, чтобы предсказать время слогов, которые оратор будет использовать дальше. Это облегчает им следить за тем, что говорится.

Многие другие вещи также происходят. С помощью методы визуализации мозга например, мы знаем, что даже когда никто не разговаривает, часть нашего мозга, ответственная за слух производит ритмическая активность со скоростью, аналогичной слогам речи. Когда мы слушаем кого-то, ритмы мозга совпадают к структуре слога. В результате ритмы мозга совпадают и отслеживают частоту и время поступающего акустического речевого сигнала.

Когда кто-то говорит, мы знаем, что движения его губ тоже помогают слушателю. Часто эти движения предшествуют речи - например, открывают рот - и дают важные подсказки о том, что скажет человек. Тем не менее, даже сами по себе движения губ содержат достаточно информации, чтобы обученные наблюдатели могли понимать речь, не слыша никаких слов - следовательно, некоторые люди, конечно, могут читать по губам.

До сих пор неясно, как эти движения обрабатываются в мозгу слушателя.

Lip-синхронизация

Это было предметом нашего последнее исследование, Мы уже знал, что это не только голосовые связки говорящего, которые производят ритм слога, но также и их движения губ. Мы хотели посмотреть, соответствуют ли мозговые волны слушателей движениям губ говорящего во время непрерывной речи сопоставимым образом с тем, как они соотносятся с самой акустической речью, и важно ли это для понимания речи.

Наше исследование впервые показало, что это действительно так. Мы записывали мозговую активность здоровых добровольцев 44, пока они смотрели фильмы о ком-то, кто рассказывал историю. Так же, как и слуховая часть мозга, мы обнаружили, что зрительная часть также производит ритмы. Они согласуются с ритмом слога, который создается губами говорящего во время непрерывной речи. И когда мы усложнили условия прослушивания, добавив отвлекающую речь, что означало, что движения губ рассказчика стали более важными для понимания того, что они говорили, выравнивание между этими двумя ритмами стало более точным.

Кроме того, мы обнаружили, что части мозга слушателя, которые контролируют движения губ, также производят мозговые волны, которые выровнены с движениями губ говорящего. И когда эти волны лучше выровнены с волнами от двигательной части мозга говорящего, слушатель лучше понимает речь.

Это поддерживает Идея, что области мозга, которые используются для выработки речи, также важны для понимания речи и могут иметь значение для изучения чтения по губам между людьми с нарушениями слуха. Показав это по отношению к говорящему и слушателю, следующим шагом будет выяснить, происходит ли то же самое с ритмами мозга во время двусторонней беседы.

Почему эти идеи интересны? Если верно, что речь обычно работает, устанавливая канал для общения посредством согласования ритмов мозга с ритмами речи - подобно настройке радио на определенную частоту для прослушивания определенной станции - наши результаты показывают, что существуют другие дополнительные каналы, которые могут принимать по необходимости. Мы можем не только настраиваться на ритмы чьих-то голосовых связок, мы можем настраиваться на эквивалентные ритмы от движения их губ. Вместо того, чтобы делать это со слуховой частью нашего мозга, мы делаем это через части, связанные со зрением и движением.

И вам не нужно быть опытным читателем, чтобы извлечь выгоду - вот почему даже в шумной обстановке, такой как паб или вечеринка, большинство людей все еще могут общаться друг с другом.

Об авторах

Йоахим Гросс, профессор психологии, Университет Глазго. Его группа исследует функциональную роль мозговых колебаний с использованием методов нейровизуализации и вычислений. Его главная цель - понять, как колебания мозга поддерживают восприятие и действие.

Хёджин Парк, научный сотрудник, Университет Глазго. В настоящее время ее исследования направлены на понимание кодирования и декодирования нейронных колебаний в контексте обработки речи с использованием методов визуализации мозга, которые оптимально разработаны для захвата временной динамики в мозге человека.

Эта статья изначально была опубликована в Беседа, Прочтите оригинал статьи.

Книги по этой теме

at Внутренний рынок самовыражения и Amazon