Назад

Качество и эффективность: метрики для оценки онлайн-курса

07.04.2024

6 мин.

6 мин.

6 мин.

6 мин.

Начинающие наставники порой думают, что узнать, насколько успешен продукт, можно только по продажам. Их много — хорошо, мало — плохо. Только вот это всё не совсем так. 

Продажи, конечно, важны. Но есть и другие моменты, которые стоит учитывать. И для полноценной оценки онлайн-продукта нужно использовать метрики. Именно они помогают определять точки роста и оперативно реагировать на негатив. 

Для оценки онлайн-продуктов есть очень много метрик. Например, вы можете понять, насколько качественно обучение, студенты удовлетворены контентом или как обстоят дела с экономической эффективностью. 

По этим же критериям метрики можно разделить на группы: 

  • бизнес-метрики (экономическая эффективность); 

  • метрики удовлетворённости пользователей (репутация школы / курса / наставника, впечатления студентов);

  • метрики качества обучения (результативность процесса и верность его построения). 

В этой статье мы поделимся метриками, которые точно вам пригодятся, и расскажем общие правила работы с ними ⭣

👔 Бизнес-метрики

ROI (Return on Investment)

С помощью этой метрики вы сможете понять, окупились ли расходы на создание и продвижение онлайн-продукта. 

ROI считается в процентах. Если показатель меньше 100%, то, увы, продукт не окупается.

ROMI (Return on Marketing Investment)

Эта метрика помогает оценить рентабельность маркетинговых затрат. То есть сколько стоило привлечение клиента. Чаще всего оценивают конкретный канал. Например, «Яндекс.Директ». Сравнивая несколько каналов, вы узнаете, какой из них эффективнее (это будет тот, где показатель ROMI выше). 

ROMI считается в процентах.

LTV (Lifetime Value)

Эта метрика может помочь «предсказать», сколько чистого дохода принесёт пользователь за время всех будущих отношений с ним.

В нашем случае она даёт понять, сколько средств принесёт вам отдельный студент за время учёбы (как нынешней, так и дальнейшей). 

LTV применима только для онлайн-школ или наставников, у которых есть как минимум несколько продуктов.

😊 Метрики удовлетворённости пользователей

CSAT (Customer Satisfaction Score)

Узнав CSAT, вы сможете понять, насколько студент доволен. Причём не только продуктом в целом, но и каким-либо аспектом. Например, качеством домашних заданий, работой преподавателей и т. д.

CSI (Customer Satisfaction Index*)

CSI тоже позволяет рассчитать удовлетворённость клиентов. К слову, особой разницы между CSAT и CSI нет. Кроме формулы расчёта. 

NPS (Net Promoter Score)

NPS — индекс потребительской лояльности. Проще говоря, это метрика показывает, насколько хорошая у вас репутация среди студентов. 

Финальное значение может быть как -100, так и +100.  Нужно ли говорить, что чем больше, тем лучше?)

CRR (Customer Retention Rate) 

Эта метрика показывает, сколько процентов учеников остаётся с вами после периода времени (его вы определяете сами). 

👍 Метрики качества обучения

COR (Completion Rate)

COR показывает, какая часть студентов прошла курс до конца.

Отметим, что на метрику может повлиять не только качество вашего продукта, но и личные обстоятельства студента. Не забывайте это. 

Transformation Rate / Success Rate

Интересная метрика. Она показывает, насколько результативным считает обучение студент. И здесь не учитываются его результаты. Лишь внутреннее ощущение. 

Чтобы получить результат, нужно провести интервью со студентами перед началом и после завершения курса. На старте попросите учеников заполнить анкету и сформулировать свою цель обучения. Это может быть что угодно: от расширения кругозора до трудоустройства. 

После завершения курса верните студенту эту анкету, чтобы он вспомнил, как сформулировал свою цель. А  затем задуйте вопрос: «Изменилась ли ваша цель за время прохождения курса?». 

Если студент ответил «нет», то задайте следующий вопрос:  «Считаете ли вы, что ваша учебная цель достигнута?». 

Если студент ответил «да», то второй вопрос не нужен.

А дальше мы определяем количество студентов, которые считают, что их цель изменилась (то есть, ответили «да» на первый вопрос), и количество студентов, достигших цели (то есть, ответили «нет» на первый вопрос и «да» на второй). 

Процент возвратов

Возвраты могут быть связаны с разными причинами. Для понимания, можете ли вы повлиять на показатель, нужно проводить опросы со студентами. Возможно, большой процент возвратов связан с качеством вашего продукта. И на это вы можете повлиять (в отличие от личных обстоятельств учеников). 

❗️ Правила работы с метриками

💡 Собирайте данные и анализируйте их регулярно. Если будете проводить исследования изредка / когда придётся или вспомнится, то, увы, никакой информации вы не получите. Важно отслеживать динамику. Постоянная работа с обратной связью и метриками поможет своевременно обратить внимание на недостатки курса / урока и исправить их. 
💡 Помните, что данные, полученные на основе метрик, должны вести к прибыли. Да, мы в самом начале сказали, что продажи — далеко не всё, на что нужно смотреть. Но они очень важны. Мы всё-таки говорим о бизнесе. Поэтому лучше измерять метрики в связке с чем-то реальным —  потенциальными выгодами и прибылью. 
💡 Используйте данные для улучшения продуктов. Исследования помогут вам выявить слабые места курсов / уроков. А это значит, вы сможете поработать над ними. Не упускайте возможность улучшить продукт. Например, поменять формат, добавить блоки или увеличить временные промежутки между потоками.   

P. S. Есть ещё множество метрик, с помощью которых вы можете оценивать и анализировать свои продукты. Главное — не забывать о них, а также соблюдать простые правила)