Измерения, оценивание, аналитика в сфере образовательных технологий (EdTech)

2026/2027

Статус: Майнор

Кто читает: Департамент образовательных программ

Где читается: Институт образования

Охват аудитории: для всех кампусов НИУ ВШЭ

Преподаватели: Адамович Ксения Александровна, Гетман Александра Витальевна

Язык: русский

Кредиты: 5

Контактные часы: 50

Дополнительные материалы в LMS Задать вопрос

Аннотация

Как понять, что в образовательном продукте реализовано на высоком уровне, а что требует доработки? Начать стоит с измерений и аналитики. На курсе вы познакомитесь с метриками обучения, научитесь их считать, интерпретировать и критически оценивать. Разберетесь, как на основе данных формулировать и проверять гипотезы, проектировать опросы и анализировать результаты. Освоите базовые подходы к работе с данными продукта и их визуализации, чтобы использовать аналитику для реальных улучшений образовательных продуктов.

Цель освоения дисциплины

Сформировать представление о ключевых метриках обучения, научиться интерпретировать и анализировать их динамику, а также выявлять на основе данных проблемы и возможности развития образовательного продукта.
Научиться формулировать проверяемые гипотезы и подбирать количественные методы для их верификации в условиях ограниченных данных.
Научиться проектировать и проводить опросы: определять цели, разрабатывать вопросы, выбирать формат и оформление анкеты.
Получить навыки анализа данных образовательного продукта, визуализации результатов в дашбордах и представления обоснованных рекомендаций по улучшению продукта в форме презентации заказчику.

Планируемые результаты обучения

Определяет ключевые метрики обучения, описывает их назначение и способы расчёта.
Выявляет потенциальные проблемы и зоны роста продукта на основе анализа метрик обучения.
Формулирует проверяемые гипотезы, исходя из анализа метрик.
Проектирует опросы: формулирует цель, разрабатывает корректные вопросы, выбирает корректные формат и визуализацию анкеты.
Проводит анализ данных образовательного продукта: подготавливает, очищает, описывает данные и выявляет закономерности.
Визуализирует результаты анализа с помощью дашбордов и готовит презентацию с выводами и рекомендациями для заказчика.
Интерпретирует метрики обучения и оценивает их динамику в образовательных продуктах.

Содержание учебной дисциплины

Метрики обучения в образовательных продуктах
Гипотезы и их проверка. Проектирование опроса
Введение в аналитику и визуализацию

Элементы контроля

Тест по метрикам
Вам нужно ответить на вопросы по метрикам: выбрать один правильный вариант, выбрать несколько правильных вариантов, дать краткий ответ (в том числе произведя перед этим необходимые расчёты). Тест направлен на контроль понимания основных метрик обучения и умения рассчитывать данные метрики. Всего в тесте 10 вопросов, время на выполнение - 15 мин.
Проект Опрос
В EdTech-компаниях (компаниях, занимающихся образовательными технологиями) исследователь часто получает на руки аналитический отчёт с ключевыми метриками курса. На основе этих данных нужно сформулировать гипотезы о проблемах или точках роста продукта и предложить исследовательские инструменты для их проверки. Один из таких инструментов - опрос студентов. Ваша задача: Изучить предоставленный кейс с контекстом курса и его метриками. Сформулировать не менее трёх гипотез о возможных проблемах, опираясь на метрики. Спроектировать опрос, который позволит проверить эти гипотезы количественными методами. Подготовить обоснования включения вопросов/блоков вопросов в соответствии с гипотезами и метриками.
Презентация заказчику
Вам, как аналитику, предстоит ответить на вопросы заказчика. Для этого вам надо провалидировать гипотезы с помощью данных и помочь выбрать те, которые обладают наибольшим потенциалом для роста продукта. Используйте изученные методики анализа данных. Результатом вашего исследования будет оформленная презентация с выводами, наблюдениями и рекомендациями по гипотезам. Чтобы ваши наблюдения были аргументированными, а коллегам было удобно следить за разными сегментами продукта, вам предстоит разработать дашборды. На основе разработанного дашборда и проведённого анализа данных, необходимо сделать презентацию для заказчика, и устно представить её.
Тест по опросам
Вам нужно ответить на вопросы по принципам создания опросного инструмента: выбрать один правильный вариант, выбрать несколько правильных вариантов, дать краткий ответ. Тест направлен на контроль понимания и применения принципов проектирования опроса, написания вопросов и их визуализации. Всего в тесте 10 вопросов, время на выполнение - 15 мин.
Активность
Элемент активности направлен на контроль вовлеченности студентов.
Кейс по метрикам
Анализ данных - асинхронный курс
Видео с материалами по анализу данных и мини-тестирования по ним. Включает в себя выполнение небольших заданий после каждого блока видео (всего 7 блоков), которые нужно сдать до теста по анализу данных + сам тест по анализу данных.

Промежуточная аттестация

2026/2027 2nd module
0.15 * Кейс по метрикам + 0.15 * Проект Опрос + 0.1 * Активность + 0.05 * Тест по опросам + 0.3 * Презентация заказчику + 0.1 * Анализ данных - асинхронный курс + 0.05 * Тест по метрикам

Список литературы

Авторы

Коваль Анастасия Алексеевна
Адамович Ксения Александровна
Гетман Александра Витальевна

Программа дисциплины