Измерения, оценивание, аналитика в EdTech

2025/2026

Статус: Майнор

Кто читает: Департамент образовательных программ

Где читается: Институт образования

Охват аудитории: для всех кампусов НИУ ВШЭ

Преподаватели: Гетман Александра Витальевна

Язык: русский

Контактные часы: 50

Дополнительные материалы в LMS Задать вопрос

Аннотация

Как понять, что в образовательном продукте реализовано на высоком уровне, а что требует доработки? Начать стоит с измерений и аналитики. На курсе вы познакомитесь с метриками обучения, научитесь их считать, интерпретировать и критически оценивать. Разберетесь, как на основе данных формулировать и проверять гипотезы, проектировать опросы и анализировать результаты. Освоите базовые подходы к работе с данными продукта и их визуализации, чтобы использовать аналитику для реальных улучшений EdTech-продуктов.

Цель освоения дисциплины

Сформировать представление о ключевых метриках обучения, научиться интерпретировать и анализировать их динамику, а также выявлять на основе данных проблемы и возможности развития образовательного продукта.
Научиться формулировать проверяемые гипотезы и подбирать количественные методы для их верификации в условиях ограниченных данных.
Научиться проектировать и проводить опросы: определять цели, разрабатывать вопросы, выбирать формат и оформление анкеты.
Получить навыки анализа данных образовательного продукта, визуализации результатов в дашбордах и представления обоснованных рекомендаций по улучшению продукта в форме презентации заказчику.

Планируемые результаты обучения

Определяет ключевые метрики обучения, описывает их назначение и способы расчёта.
Умеет интерпретировать метрики обучения и оценивать их динамику в образовательных продуктах.
Выявляет потенциальные проблемы и зоны роста продукта на основе анализа метрик обучения.
Формулирует проверяемые гипотезы, исходя из анализа метрик.
Проектирует опросы: формулирует цель, разрабатывает корректные вопросы, выбирает корректные формат и визуализацию анкеты.
Проводит анализ данных образовательного продукта: подготавливает, очищает, описывает данные и выявляет закономерности.
Визуализирует результаты анализа с помощью дашбордов и готовит презентацию с выводами и рекомендациями для заказчика.

Содержание учебной дисциплины

Метрики обучения в EdTech
Гипотезы и их проверка. Проектирование опроса
Введение в аналитику и визуализацию

Элементы контроля

Активность
Элемент активности направлен на контроль вовлеченности студентов.
Тест по метрикам
Вам нужно ответить на вопросы по метрикам: выбрать один правильный вариант, выбрать несколько правильных вариантов, дать краткий ответ (в том числе произведя перед этим необходимые расчёты). Тест направлен на контроль понимания основных метрик обучения и умения рассчитывать данные метрики. Всего в тесте 10 вопросов, время на выполнение - 15 мин.
Кейс по метрикам
Тест по опросам
Вам нужно ответить на вопросы по принципам создания опросного инструмента: выбрать один правильный вариант, выбрать несколько правильных вариантов, дать краткий ответ. Тест направлен на контроль понимания и применения принципов проектирования опроса, написания вопросов и их визуализации. Всего в тесте 10 вопросов, время на выполнение - 15 мин.
Проект Опрос
В EdTech-компаниях исследователь часто получает на руки аналитический отчёт с ключевыми метриками курса. На основе этих данных нужно сформулировать гипотезы о проблемах или точках роста продукта и предложить исследовательские инструменты для их проверки. Один из таких инструментов - опрос студентов. Ваша задача: Изучить предоставленный кейс с контекстом курса и его метриками. Сформулировать не менее трёх гипотез о возможных проблемах, опираясь на метрики. Спроектировать опрос, который позволит проверить эти гипотезы количественными методами. Подготовить обоснования включения вопросов/блоков вопросов в соответствии с гипотезами и метриками.
Презентация заказчику
Вам, как аналитику, предстоит ответить на вопросы заказчика. Для этого вам надо провалидировать гипотезы с помощью данных и помочь выбрать те, которые обладают наибольшим потенциалом для роста продукта. Используйте изученные методики анализа данных. Результатом вашего исследования будет оформленная презентация с выводами, наблюдениями и рекомендациями по гипотезам. Чтобы ваши наблюдения были аргументированными, а коллегам было удобно следить за разными сегментами продукта, вам предстоит разработать дашборды. На основе разработанного дашборда и проведённого анализа данных, необходимо сделать презентацию для заказчика, и устно представить её.

Промежуточная аттестация

2025/2026 2nd module
0.1 * Активность + 0.1 * Активность + 0.2 * Кейс по метрикам + 0.3 * Презентация заказчику + 0.2 * Проект Опрос + 0.05 * Тест по метрикам + 0.05 * Тест по опросам

Список литературы

Авторы

Гетман Александра Витальевна
Вырва Елена Евгеньевна

Программа дисциплины