Шкала Лайкерта в анкете курса: как сформулировать вопрос и прочитать ответы

После курса автор видит «4 из 5» и решает, что инструкции к заданиям понятны. Но такую же среднюю оценку могут дать совершенно разные распределения ответов. Чтобы выбрать изменение, нужно знать формулировку пункта, число ответивших, варианты ответа и конкретные затруднения. Начнём с одной проверяемой стороны опыта — возможности приступить к самостоятельному заданию без уточнений.

Определите, какое утверждение оценивает ученик

Шкала согласия предлагает упорядоченные ответы от несогласия до согласия. В обзоре Qualtrics рассмотрены такие градации и варианты их применения. В этой статье речь об отдельном вопросе такого типа; он сам по себе не становится проверенным инструментом измерения мотивации или качества обучения в целом.

Подготовим утверждение: «После чтения инструкции к заданию второго модуля мне было понятно, какой результат нужно сдать». Здесь указаны конкретное место курса и один предмет оценки. Ответ поможет исследовать ясность ожидаемого результата, но не покажет, умеет ли человек правильно выполнить само задание.

Если ученик не открывал второй модуль, его ответ нельзя интерпретировать так же, как опыт завершившего работу участника. Этот случай нужно предусмотреть до запуска анкеты.

Подпишите каждую градацию

Для нашего примера используем пять вариантов: «Полностью не согласен», «Скорее не согласен», «Ни согласен, ни не согласен», «Скорее согласен», «Полностью согласен». Внутри одного блока сохраняйте одинаковое направление и подписи. Числа могут помогать обработке, но не должны заменять смысл вариантов на экране ученика.

Отдельно добавьте «Не выполнял это задание». Такой ответ описывает отсутствие нужного опыта, а не среднюю позицию. Не кодируйте его тройкой. Если человек может не помнить инструкцию, допустим отдельный вариант «Не помню»; заранее решите, как показывать его в отчёте.

Проверьте анкету на телефоне. Длинная горизонтальная строка с обрезанными подписями провоцирует случайный выбор. Лучше дать варианты вертикально, если используемый сервис не умеет корректно размещать их на узком экране.

Уберите вопросы, на которые нельзя ответить однозначно

Фраза «Инструкция была понятной и достаточно подробной» содержит два признака. Участнику могла быть понятна цель, но не хватать технического шага. Разделите утверждение или выберите тот признак, который связан с будущим решением.

В методических рекомендациях Pew Research Center отдельно разобрана проблема вопросов сразу о нескольких понятиях. Там же объясняется, почему изменение формулировки мешает сравнению результатов во времени.

Попросите нескольких участников пересказать вопрос своими словами. Если один оценивает видео, другой работу куратора, а третий файл задания, уточните название материала. Такая проверка не доказывает статистическую надёжность анкеты, но помогает обнаружить очевидные расхождения в понимании до массовой рассылки.

Сравните распределения с одинаковым средним

Рассмотрим два условных набора из десяти ответов, закодированных от одного до пяти. В группе А все десять участников выбрали четыре. В группе Б пять выбрали три и пять — пять. В обоих случаях сумма равна сорока и среднее равно четырём, однако опыт групп выглядит по-разному.

В первом случае все ответившие скорее согласны. Во втором половина заняла нейтральную позицию, а половина полностью согласна. Если сохранить только среднее, это различие исчезнет. Для небольшого потока показывайте количество ответов по каждой категории и основание расчёта долей.

Предположим, анкету заполнили двенадцать человек: десять дали содержательную оценку, двое не выполняли задание. Доли согласия считайте с явно указанным знаменателем. Запись «пять из десяти оценивших» прозрачнее, чем один процент без пояснения, куда исчезли остальные ответы.

Свяжите оценку с наблюдаемым затруднением

После шкалы задайте короткий необязательный вопрос: «Что пришлось уточнять перед сдачей?» Не просите оправдывать низкую оценку и не внушайте, что проблема обязательно возникла. Ответ «не понял формат файла» даёт направление проверки; число само по себе такого направления не содержит.

Сопоставьте ответы с содержанием инструкции и повторяющимися обращениями. Если две группы по-разному поняли термин «итоговый документ», можно проверить новую подпись и пример результата. Если затруднение связано с отсутствующим навыком, подробная инструкция по сдаче не решит учебную проблему.

Более широкий порядок исследования описан в материале об анкете после курса. Здесь полезно сохранить узкий фокус на одном пункте и его интерпретации.

Зафиксируйте правила следующего измерения

Сохраните текст вопроса, порядок ответов, момент отправки и критерий включения участника. При сравнении потоков отмечайте изменения программы и состава аудитории. Ответы нескольких активных учеников не описывают автоматически всех зарегистрированных.

Не складывайте оценки ясности инструкции, удобства платформы и работы куратора в единый «индекс успеха» без обоснования. Для практического улучшения небольшого курса чаще полезнее отдельные распределения и конкретные комментарии.

Анкету можно подготовить во внешнем сервисе, а в Umhub разместить понятную инструкцию для участников. Затем внесите выбранное изменение в план улучшений курса, указав, какое наблюдение его обосновывает и как вы проверите результат.