Логотип МИЭМ НИУ ВШЭ
Завершен
Логотип типа проекта Программный
Программный
2020 / 2021
Логотип проекта Распознавание медиаконтента

28 Распознавание медиаконтента

Старт
16.09.2020

Паспорт проекта

Аннотация

В МИЭМ развернуты видеооснащенные комнаты (504, 305, 306, 307, 308), в них установлены камеры для автоматической и режиссерской многокамрной видеозаписи и транлсяции проводимых там занятий и мероприятий. Одна из камер в этих комнатах устанавливается широкоугольная, чтобы видеть весь зал. Поток с этой камеры используется для анализа эмоций, вовлеченности и подсчета количества слушателей в зале. Результаты анализа отправляются в базу данных (для цифрового следа) и в виде визуализированного...

Отрасль

Информатика

Теги

Информатика

Цель

* Учет эмоционального отклика, вовлеченности и подсчет количества присутствующих в видеооснащенных помещениях. * Составление цифрового следа проводимых мероприятий. * Ввизуализация динамики эмоционального отклика в видеозаписи мероприятия.

Ожидаемые результаты

  • * Сервис анализа видеопотоков развернут в МИЭМ для обработки записей мероприятий и занятий из оснащенных помещений. Записи берутся из GoogleDrive, куда их помещает Облачный видеорекордер.
    • * Сервис формирует таблицы с сырыми данными для последующего анализа, а также создаёт изображение для наложения в компоновку "преподаватель+презентация", формируемую Облачным видеорекордером. 
      • * Сервис может использоваться для работы в прямом эфире.

        Форма и способы промежуточного контроля

        * Регулярное представление результатов и консультации по проектным дням * Плановые этапы отчетности (презентация проекта в ноябре, постерная сессия в январе, защита в апреле)

        Форма представления результатов

        * Внедрение в работу Облачного видеорекордера: компоновки дополняются графиком динамики эмоционального отклика и подсчетом количества людей в зале. * Сырые данные сохраняются вместе с видеозаписями в облаке в таблице. * Документация администратора и разработчика -- в git. * Пользовательская документация не предусмотрена. * Отчет по проекту в краткой форме с объяснением архитектуры проекта, использованного технологического стека и интерпретации результатов анализа. * Презентация и скринкаст для о

        Ресурсное обеспечение

        * Виртуальная машина для размещения сервера * Доступ к хранилищу данных Облачного видеорекордера * Доступ к потокам с камер в МИЭМ

        Имеющийся задел

        Заполнено автоматически

        Заказчик

        МИЭМ / ДКИ