28 Распознавание медиаконтента

Моисеев Михаил Васильевич

руководитель проекта

Королев Денис Александрович

руководитель направления

Старт

25.09.2023

Представление

27.01.2024 – 07.02.2024

Постерная сессия

14.04.2024 – 25.04.2024

Защита

02.10.2024 – 09.10.2024

Паспорт проекта

Аннотация

Проект является основным проектом по "интеллектуальной автоматизации" процесса видеопроизводства, производимого телецентром МИЭМ.ТВ. Основные продукты в текущем ак. году: * ПО "AutoDirector" - программное обеспечение автоматизирующее работу OBS для облегчения работы режиссера и для создания линейного монтажа в реальном времени * ПО "Smile Detector" - приложение для детекции улыбок на входном потоке, возвращающее результаты детекции в качестве оверлея. * ПО "Smart Cards" - Приложение для...

Отрасль

Информатика

Цель

* Учет эмоционального отклика, вовлеченности и подсчет количества присутствующих в видеооснащенных помещениях. * Составление цифрового следа проводимых мероприятий. * Ввизуализация динамики эмоционального отклика в видеозаписи мероприятия.

Ожидаемые результаты

1. ПО "Neural API" - северное приложение для обработки кадров путем нейросетей, возвращающее результаты распознания. Используется другими продуктами проекта
1. ПО "AutoDirector" - программное обеспечение автоматизирующее работу OBS для облегчения работы режиссера и для создания линейного монтажа в реальном времени
1. ПО "Smile Detector" - приложение для детекции улыбок на входном потоке, возвращающее результаты детекции в качестве оверлея.

Форма и способы промежуточного контроля

Еженедельные встречи с руководителем направления или лидом разработки конкретного продукта, демонстрация проделанной работы. Учет проделанной работы в трекере Odoo.

Форма представления результатов

Согласно правилам ведения проектов в [Мастерской видеотехнологий](https://nvt.miem.hse.ru/workshop)

Ресурсное обеспечение

* Средства сопровождения разработки: git, Odoo, Gitlab CI/CD * Общение: Zulip (chat.miem.hse.ru) * Высокопроизводительные компьютеры в Медиацентре МИЭМ * Вычислительные мощности кластера МИЭМ

Имеющийся задел

Этот проект -- общий для всех разработок [Мастерской видеотехнологий](https://nvt.miem.hse.ru/workshop) в области CV/AI/ML. Отдельные продукты могут выделятья в самостоятельные проекты (например, 592). Проект непланово возродился в 2023 году -- была создана система распознавания улыбок для съемок реалити-шоу "Большое шоу", в которых участвует команда лаборатории Сетевых видеотехнологий. Первая версия была успешно внедрена в сентябре 2023. Ведутся работы над отчуждаемой версией...