28 Распознавание медиаконтента

Михаил Моисеев

руководитель проекта

Королев Денис Александрович

руководитель направления

Старт

16.09.2020

Паспорт проекта

Аннотация

В МИЭМ развернуты видеооснащенные комнаты (504, 305, 306, 307, 308), в них установлены камеры для автоматической и режиссерской многокамрной видеозаписи и транлсяции проводимых там занятий и мероприятий. Одна из камер в этих комнатах устанавливается широкоугольная, чтобы видеть весь зал. Поток с этой камеры используется для анализа эмоций, вовлеченности и подсчета количества слушателей в зале. Результаты анализа отправляются в базу данных (для цифрового следа) и в виде визуализированного...

Отрасль

Информатика

Цель

* Учет эмоционального отклика, вовлеченности и подсчет количества присутствующих в видеооснащенных помещениях. * Составление цифрового следа проводимых мероприятий. * Ввизуализация динамики эмоционального отклика в видеозаписи мероприятия.

Ожидаемые результаты

* Сервис анализа видеопотоков развернут в МИЭМ для обработки записей мероприятий и занятий из оснащенных помещений. Записи берутся из GoogleDrive, куда их помещает Облачный видеорекордер.
* Сервис формирует таблицы с сырыми данными для последующего анализа, а также создаёт изображение для наложения в компоновку "преподаватель+презентация", формируемую Облачным видеорекордером.
* Сервис может использоваться для работы в прямом эфире.

Форма и способы промежуточного контроля

* Регулярное представление результатов и консультации по проектным дням * Плановые этапы отчетности (презентация проекта в ноябре, постерная сессия в январе, защита в апреле)

Форма представления результатов

* Внедрение в работу Облачного видеорекордера: компоновки дополняются графиком динамики эмоционального отклика и подсчетом количества людей в зале. * Сырые данные сохраняются вместе с видеозаписями в облаке в таблице. * Документация администратора и разработчика -- в git. * Пользовательская документация не предусмотрена. * Отчет по проекту в краткой форме с объяснением архитектуры проекта, использованного технологического стека и интерпретации результатов анализа. * Презентация и скринкаст для о