Завершен
2022 / 2023
![Логотип проекта Разработка методики оценки производительности краулеров](/_next/image?url=https%3A%2F%2Fcabinet.miem.hse.ru%2Fback%2Fpublic-file%2Fpreset%2Fnir-default.png&w=3840&q=75)
1320 Разработка методики оценки производительности краулеров
Старт
28.09.2022
Паспорт проекта
Аннотация
Рассматриваются типовые схемы сбора данных в сети Интернет. Проводится классификация стандартных задач по сбору данных. Для этих задач разрабатываются типовые сценарии работы краулеров и формируются характеристики эффективности работы краулеров. При необходимости разрабатываются математические модели оценки эффективности работы краулеров, осуществляется экспериментальная оценка этих характеристик на реальных задачах сбора данных.
Отрасль
Информатика
Теги
Информатика
Цель
Разработка типовых моделей бенчмаркинга краулеров данных в открытых источниках данных сети Интернет
Ожидаемые результаты
- Разработка методики оценки эффективности работы краулеров для типовых задач сбора данных, включая способ бенчмаркинга краулеров.
Форма и способы промежуточного контроля
Предусмотренные правилами, установленными Проектным офисом
Форма представления результатов
Научно-технический отчет
Ресурсное обеспечение
Необходимые инструментальные средства предоставляются ЗАО ЕС-лизинг, включая лицензию на Data Hunter
Имеющийся задел
Рабочие материалы ЗАО "ЕС-лизинг"
Заказчик
МИЭМ / ДКИ