Коррекция взгляда в видео: как нейросеть делает контакт глаз с камерой

Эксперт записывает видео и читает текст с экрана ноутбука или телефона — взгляд направлен чуть ниже или в сторону от объектива. Зритель чувствует это: кажется, что человек смотрит мимо. Коррекция взгляда — нейросетевая функция, которая перерисовывает глаза так, будто человек смотрит прямо в камеру.

Как работает коррекция

Нейросеть находит глаза в каждом кадре, определяет направление взгляда и перерисовывает зрачки и веки так, чтобы взгляд был направлен в объектив. При этом сохраняется моргание и естественное движение глаз. Качество зависит от угла отклонения: небольшое смещение исправляется хорошо, сильный взгляд в сторону — заметно хуже.

Где встречается функция

• Программы для созвонов и стриминга. Например, NVIDIA Broadcast для компьютеров с видеокартами NVIDIA предлагает эффект зрительного контакта в реальном времени. В FaceTime на iPhone есть настройка коррекции взгляда.
• Сервисы редактирования видео. Например, в Descript есть функция коррекции взгляда для уже записанных роликов.
• Видеоредакторы и онлайн-сервисы с отдельными нейросетевыми эффектами для лица.

Набор функций и требования к устройствам меняются, поэтому проверяйте актуальные возможности в описании программ.

Сценарии использования

1. Экспертные видео для соцсетей, где спикер читает текст.
2. Обучающие ролики для сотрудников и клиентов.
3. Видеообращения руководителя.
4. Онлайн-встречи и вебинары, когда смотрите на собеседника на экране, а не в камеру.
5. Видеопрезентации товара с ведущим.

Как получить естественный результат

• Минимизируйте исходное отклонение. Расположите текст как можно ближе к объективу — например, окно с текстом прямо под камерой ноутбука. Чем меньше угол, тем естественнее коррекция.
• Хороший свет на лицо. Нейросеть точнее работает, когда глаза хорошо видны.
• Без очков с бликами, если возможно, — блики мешают распознаванию.
• Не крутите головой резко — при поворотах коррекция может сбиваться.

Когда коррекция выдаёт себя

1. Застывший взгляд. Человек смотрит в камеру не отрываясь — живые люди иногда отводят глаза, думая.
2. Странные глаза при повороте головы. Взгляд остаётся в камере, когда голова повёрнута, — выглядит пугающе.
3. Артефакты — дрожание зрачков, неестественный блеск.
4. Расхождение с мимикой — человек улыбается, а глаза остаются неподвижными.

Лучшие инструменты позволяют регулировать силу эффекта или автоматически отключать его, когда человек отводит взгляд намеренно.

Альтернатива: телесуфлёр

Телесуфлёр — устройство с полупрозрачным зеркалом перед объективом, на котором отображается текст. Спикер читает и при этом смотрит прямо в камеру. Существуют недорогие варианты для смартфонов. Для регулярной записи экспертного контента это надёжнее любой нейросети. Ещё один путь — не читать дословно, а говорить по тезисам, лишь изредка глядя на подсказку.

Нейросеть может помочь и здесь: попросите языковую модель превратить готовый текст в короткие тезисы по одному на строку. Такие подсказки легко запомнить, и спикер смотрит в камеру естественно, без коррекции. Речь при этом звучит живее, чем при чтении.

Этический вопрос

Коррекция взгляда меняет то, как выглядит человек, хоть и незначительно. Для маркетинговых видео это обычно воспринимается нормально, как и цветокоррекция. В деловых переговорах некоторые собеседники могут посчитать её неуместной — особенно если узнают о ней. Используйте открыто: если спрашивают, честно отвечайте.

Итог

Нейросетевая коррекция взгляда помогает спикеру, читающему текст, выглядеть так, будто он смотрит в камеру. Она хорошо работает при небольшом отклонении взгляда, хорошем свете и спокойных движениях головы. Для регулярных записей рассмотрите телесуфлёр, а коррекцию используйте как дополнение и проверяйте результат на естественность.