Что можно улучшить в большинстве корпоративных LMS*?
Несколько дней назад на обсуждении одного из курсов с командой кураторов как-то случайно в голову щёлкнула мысль, которая не давала мне покоя последние несколько лет — почему мне так не нравятся тесты в большинстве LMS.
Потому что я не понимаю логику составителей курсов.
Например, мне дают тест, и там один вариант ответа верный. Но авторы часто начинают игру синонимов, где по смыслу все ответы верные, а по существу есть тот один, который выведен математической статистикой и выверен на 200%.
В вопросах с мультивыбором авторы тестов часто пытаются придумать несколько схожих вариантов ответов, чтобы запутать сдающего! В итоге сдать такой тест становится совсем не просто. При 2 из 3 верных (из 4х вариантов) ответов тебе дают 0 баллов за вопрос.
▫️гипотеза: если дать обучающемуся несколько раз пройти верно предварительные тесты, составленные теми же авторами, то он будет лучше проходить тесты.
Когда обучающийся несколько раз сталкивается с тестами от одного и того же автора, он подстраивается под стиль вопросов, это и повышает результат, и снижает стресс от не понимания ожиданий. Пара предварительно пройденных успешных тестов, перед итоговым тестом по курсу того же автора реально даст мне намёки на то как именно нужно подходить к ответам. Это называется эффект от тестирования. В изображении к посту я привел скриншот из Duolingo. Несмотря на абсурдность ответа я уже привык к тому как мыслят авторы, поэтому знаю верный.
▫️гипотеза: Если дать обучающемуся выбор режима проверки — строгого (0 баллов, если не всё верно) или мягкого (частичное засчитывание),
то снизится негатив от прохождения тестов с почти полным правильным ответом
Во многих LMS зачем-то выбирают строгий режим проверки ответов. В кейсе выше, где из 3 верных я выбрал правильно два из трех (на самом деле 3 из 4, ведь я угадал и один вариант который не нужно было выбирать), я на 75% верно ответил. В строгом режиме я получаю 0 баллов. В не строгом 0.75.
Почему именно выбирать, а не сделать не строгий режим для всех? Потому что одни исследования говорят что частично засчитывать результаты влияет позитивно, а другие что всё не так просто, когда нужно проверить именно знания, а не кратко пройтись по уже пройденному, чтобы оно лучше осело в памяти.
Конечно, можно на всё написанное выше сказать: «Берите нормальных преподавателей и выверяйте тесты». Но мы живём в реальном мире, в котором курсы для разработчиков часто делают сами разработчики. И это даже хорошо, погружённость в контент важнее методологического профессионализма.
Поэтому такие продуктовые решения — это не замена методологии, а способ уменьшить боль пользователя и повысить качество в рамках реальных ограничений.
* LMS — Learning Management System, система для обучения
