Я задала себе этот вопрос перед закрытием финансового года и поняла, что оценка часто строится на интуиции: понятная ли структура? не перегружен ли контент? есть ли интерактивность?
Но если не на интуиции и опыте, то на чем основывать систему оценки?
Поэтому, было решено отправиться на поиски, какие в EdTech существуют исследования, которые позволяют сделать оценку доказательно.
Вот что нашла:
📌 1. Оценка выравнивания курса по модели Quality Matters
Чем поможет: проверить, насколько цели обучения связаны с заданиями и контентом. В методике Quality Matters используются чек-листы, которые можно адаптировать.
Источник: https://www.qualitymatters.org/
Чек лист нашла, будет под постом.
📌 2. Метрика Completion Rates, как показатель качества курса
Чем поможет: достижение метрик по количеству завершивших курс (выпускников) - одна из самых сложных задач. Делить ли ответственность между продуктовой командой и студентом — вечный спор. А точно ли высокий CR = хороший курс?
Ответ нашла в статье, которая помогла мне исследовать этот вопрос и найти решение для своего проекта. Внутри много ссылок, куда можно провалиться, чтобы закопаться глубже.
Источник: https://openpraxis.org/articles/10.55982/openpraxis.16.3.606
📌 3. A/B тесты
Чем поможет: в продуктовом подходе без A/B тестов никак. Метод когортного анализа помогает ответить на вопрос, какое улучшение на курсе сработало? Это не быстрый путь. Что делать: разделить студентов на когорты по времени старта курса и смотреть, как изменяются их результаты. Например, если после обновления интерактивных заданий коэффициент завершения вырос с 40% до 58%, значит, изменение сработало.
На что еще можно ориентироваться:
- % студентов, сдавших финальное тестирование / дипломный проект
- Среднее время на модуль
- Где студенты массово бросают курс (воронка)
Давайте сделаем эту неделю полезной для всех нас! Делитесь, кто как замеряет качество курсов? На что ориентируетесь? Может, есть готовые чек-листы или наработки, которыми можно поделиться здесь?
