Диаграммы Эйлера и разработка тестов знаний

Тест “Логика на кругах” – это рекламно-демонстрационный тест для потенциальных участников нашей дистанционной летней школы КТЗ-25. В нем 15 заданий (экранов). Он займет у Вас не больше 7-10 минут и позволит достаточно надежно измерить степень Вашей готовности к восприятию материалов нашего дистанционного курса.

Вот ссылка на лэндинг самого курса “КТЗ-25”, где на него можно сразу же записаться.

А.Г. Шмелёв:

Я уже более 40 лет преподаю такую особую дисциплину как “Разработка тестов” (Test construction). Из них 40 лет я преподавал эту дисциплину в формате спецпрактикума для весьма одаренных студентов МГУ имени М.В.Ломоносова. Среди этих студентов тоже встречались иной раз субъекты со слаборазвитым логическим мышлением, но большинство справлялись вполне успешно. Более серьезные проблемы у меня начались, когда я стал предлагать аналогичный практикум другому контингенту – людям, которые называют сами себя “эйчарами”, но при этом получили …гм…самое разное образование, иной раз весьма “условное”, и редко кто из них изучал математическую логику.

Вот тут-то примерно половина участников практикума начали сталкиваться с существенными проблемами. Проблемы эти начинались буквально с первого экрана на моих слайд-лекциях, где я предлагаю воспользоваться “круговыми диаграммами Эйлера”. Оказалось, что сам язык этих диаграмм участникам наших онлайн-курсов оказывается малознакомым, слишком абстрактным, неестественным (?!). А ведь эти диаграммы – надежный и наглядный инструмент, который позволяет в явном виде описать структуру ключевых утверждений в тестовых заданиях, добиться безупречной логики в этих заданиях – особенно в тестах на знания и способности.

Сейчас в преддверии летнего цикла занятий мы хотели бы Вам предложить выполнить такой тест:

https://test.ht-inc.ru/test/9efd4f3c295bee707114b3d126293c51

За первые три дня его выполнили уже 61 человек (и это еще не окончательная цифра – мы продолжаем держать тест открытым). Причем более трети (22 человека, или 37%) показали максимальный 100-процентный результат (!). Вот как выглядит гистограмма распределения тестовых баллов:

Что еще интересно заметить? – Много было очень легких заданий (я намеренно вначале такие поставил, чтобы возник комфортного 100-процентного понимания и обучаемости). При этом интересно то, что самый высокий показатель КД (коэффициент дискриминативности) обнаружен у самого трудного последнего задания. По наполнению клеток четырехклеточной таблицы сопряженности (ЧТС) мы видим, что ошибочные ответы дали только представители “низкой группы” – люди с общим низким баллов по тесту (относительно низким). Таких оказалось в клеточке D (в правой нижней), как видим, всего 17 человек. А вот из высокой группы ни один испытуемый не ошибся: в левой нижней клеточке C стоит значение 0. Кстати на этом скриншоте указано, что тест уже выполнили не 61, а 62 человека.

Средняя продолжительность выполнения 15 заданий – 11 минут. Но… появился и такой участник по имени Александр, который показал 100-процентный результат быстрее, чем за 5 минут (!). Так что в данном случае различия скорее проявились в скорости выполнения, чем в набранных баллах. Тоже любопытный факт.

Подробный вариант статьи читайте на блоге А.Г. Шмелёва -> здесь.