592 Система автоматизации съемки и монтажа

Михаил Моисеев

руководитель проекта

Королев Денис Александрович

руководитель направления

Старт

25.09.2023

Представление

10.11.2023

Постерная сессия

27.01.2024 – 07.02.2024

Защита

18.04.2024

Паспорт проекта

Аннотация

ПО "AutoOperator" - автоматический референсный трекер для отслеживания человека PTZ-телекамерой на сцене в режиме реального времени. Предполагается выбор цели при помощи распознания лица и голосовое управление. ПО "AutoOperator Light" - облегченная версия автоматического оператора, подразумевающая удержание человека в кадре. Данное ПО подразумевает нереферентный трекер без возможности выбора цели. В данном проекте преобладают задачи алгоритмического характера, связанные с использованием...

Отрасль

Информатика

Цель

Создать различные продукты для автоматизации проведения телевизионных съемок. Внедрить разработки как в МИЭМ.ТВ, так и в компании внешних пользователей.

Ожидаемые результаты

### Основные продукты проекта
1. ПО "AutoOperator" - автоматический референсный трекер для отслеживания человека на сцене в режиме реального времени. Предполагается выбор цели при помощи распознания лица и голосовое управление.
* Мобильное приложение для управления автооператором
2. ПО "AutoOperator Light" - облегченная версия автоматического оператора, подразумевающая удержание человека в кадре. Данное ПО подразумевает нереферентный трекер без возможности выбора цели.

Форма и способы промежуточного контроля

Еженедельные встречи с руководителем направления или лидом разработки конкретного продукта, демонстрация проделанной работы. Учет проделанной работы в трекере Odoo.

Форма представления результатов

Работающая система автоматической съемки и монтажа, введенная в эксплуатацию в медиацентре МИЭМ

Ресурсное обеспечение

* Средства сопровождения разработки: git, Odoo, Gitlab CI/CD * Общение: Zulip (chat.miem.hse.ru) * Высокопроизводительные компьютеры в Медиацентре МИЭМ * Вычислительные мощности кластера МИЭМ

Имеющийся задел

Продуктивная работа в этом проекте началась в 2022-23 ак. году, тогда был с нуля создан референсный трекер для PTZ камер (опирающийся на поток с камеры общего вида). Но отчуждаемость не достигнута -- изменение ракурса или взаимного расположения камер требует перенастройки программы. Также для телевизионного производства создана облегченная версия -- "ассистент оператора", работающая лишь по потоку с основной камеры (PTZ) -- она позволяет выполнять микродвижения, которые "очеловечивают" съемку...