Раздел в разработке
Эффект Макгурка: почему мы слышим то, что видим
Эффект Макгурка — феномен аудиовизуального восприятия, который объясняет, почему мы иногда слышим не то, что произносится, и как изображение способно переписать звук в нашем восприятии.
Случайное открытие
В 1976 году британским психолог Гарри Макгурк изучал восприятие речи у детей. В какой-то момент его ассистент по ошибке наложил звуковую дорожку не на то видео: звук «ба-ба» совместился с артикуляцией «га-га». Испытуемые слышали «да-да» — звук, которого не было ни в видеоряде, ни на дорожке.
Так был открыт один из самых наглядных примеров того, как разные органы чувств не просто дополняют, а перекрывают друг друга.
В 2020 году об этом эффекте вспомнили благодаря вирусному ролику со словами: «корнелиус» и «коронавирус», когда зритель слышал в фонограмме то слово, которое успела прочитать первым.
Так был открыт один из самых наглядных примеров того, как разные органы чувств не просто дополняют, а перекрывают друг друга.
В 2020 году об этом эффекте вспомнили благодаря вирусному ролику со словами: «корнелиус» и «коронавирус», когда зритель слышал в фонограмме то слово, которое успела прочитать первым.
Как это работает
Слух и зрение работают вместе — мозг постоянно сопоставляет акустический сигнал с визуальной информацией об артикуляции: положением губ, движением челюсти, мимикой. В обычных условиях эти каналы совпадают и усиливают друг друга.
Когда между ними возникает противоречие, мозг не выбирает один из сигналов — он пытается их объединить. Результат может быть трёх видов:
Доминирование зрения: воспринимается звук, соответствующий артикуляции на видео, а не реальный звук.
Компромисс: слуховая кора объединяет два несовместимых сигнала в третий — которого нет ни в звуке, ни в картинке.
Доминирование слуха: реальный звук побеждает — встречается реже и зависит от конкретного сочетания фонем.
Исследования показывают, что зрение доминирует над слухом примерно в 70% случаев. Причём эффект сохраняется, даже когда человек знает о нём и специально пытается услышать реальный звук.
Когда между ними возникает противоречие, мозг не выбирает один из сигналов — он пытается их объединить. Результат может быть трёх видов:
Доминирование зрения: воспринимается звук, соответствующий артикуляции на видео, а не реальный звук.
Компромисс: слуховая кора объединяет два несовместимых сигнала в третий — которого нет ни в звуке, ни в картинке.
Доминирование слуха: реальный звук побеждает — встречается реже и зависит от конкретного сочетания фонем.
Исследования показывают, что зрение доминирует над слухом примерно в 70% случаев. Причём эффект сохраняется, даже когда человек знает о нём и специально пытается услышать реальный звук.
Почему это важно для работы со звуком
Эффект Макгурка напрямую касается аудиовизуальных искусств, где звук существует вместе с изображением.
Рассинхрон в кино и на телевидении.
Если изображение и звук расходятся, мозг получает противоречивые сигналы. Зритель может не осознавать причину дискомфорта, но воспринимать происходящее как «что-то не то». Именно поэтому стандарты синхронизации в вещании такие строгие.
Это же объясняет, почему рассинхрон звука и изображения воспринимается так болезненно даже при небольших значениях: мозг не просто замечает несовпадение — он активно пытается его исправить, и это требует усилий.
Это же объясняет, почему рассинхрон звука и изображения воспринимается так болезненно даже при небольших значениях: мозг не просто замечает несовпадение — он активно пытается его исправить, и это требует усилий.
Дубляж и озвучка.
Когда актёр дубляжа записывает речь под чужую артикуляцию, мозг зрителя автоматически сравнивает их. Чем точнее совпадение ритма и ударений — тем убедительнее аудиовизуальное восприятие речи, даже если губы двигаются не так.
Видеоконференции.
Задержка видео относительно звука или наоборот создаёт эффект, близкий к макгурковскому: мозг получает рассогласованные сигналы и тратит ресурсы на их «склейку». Это одна из причин усталости от длинных видеозвонков.
Реклама.
Совпадение произносимого слова с субтитром или текстом на экране усиливает восприятие — мозг получает согласованные сигналы сразу по нескольким каналам.
Индивидуальные различия.
Чувствительность к эффекту индивидуальна. На неё влияют острота зрения, тип обработки информации и опыт работы со звуком. Профессиональные звукорежиссёры и музыканты нередко лучше изолируют слуховой канал от зрительного, хотя полностью отключить эффект не удаётся никому.
Эффект Макгурка напоминает: то, что мы слышим — всегда интерпретация, а не прямая копия звука.
Эффект Макгурка напоминает: то, что мы слышим — всегда интерпретация, а не прямая копия звука.