В театре Arden VR-очки с искусственным интеллектом синтезируют субтитры для театральных зрителей c глухотой

В театре Arden в Филадельфии начали использовать специально-разработанные очки виртуальной реальности с встроенным программным модулем Sveltext с искусственным интеллектом.

Это оборудование позволяет автоматически синтезировать речь артистов в субтитры и показывать их так, чтобы они не отвлекали внимание зрителя от происходящего на сцене, не отставали при воспроизведении реплик и гармонично дополняли действие. Очки предназначены для зрителей с ограниченными возможностями по слуху и позволяют им полноценно воспринимать сценический текст. Впервые они были успешно опробованы во время постановки «Сидящая леди» — документальной драме о столетней женщине, которая даже в хосписе продолжает давать своей семье уроки жизнелюбия.

Процесс настройки очков для спектакля занимает около недели. На сценических репетициях сотрудник отслеживает время произнесения каждой реплики, а также световые и звуковые сигналы, которые могут стать триггерами для их визуализации, а затем загружает получившуюся партитуру в программу. Во время выступления очки реагируют на сигналы и улавливают диалоги из микрофона, расположенного над серединой сцены, а затем мгновенно сопоставляют с закаченным в них текстом пьесы и выводят субтитры в полной синхронизации с происходящим.

Также персонализированный интерфейс позволяет регулировать расположение, размер и цвет текста с помощью портативного устройства, которое выдается вместе с очками.

Лиза Зоннеборн, директор отдела медиаискусства и культуры Института нетрудоспособных граждан Университета Темпл, занимается распространением этой технологии во всем мире. Она так описывает свой опыт: «Я просто смеялась в то же время, когда смеялись все остальные. В этом и есть волшебство очков: люди могут получить тот же опыт, что и их друзья и члены семьи».

Зоннеборн рассчитывает, что в ближайшее время очки будут дополнены возможностью перевода титров на разные языки, а количество театров, использующих их для своей аудитории, расширится.