Рис. 11.

Если после каждого сеанса тестирований приводить кривые распределения результатов к каноническому виду путем «перевзвешивания», то, вместе с «плывущими» кривыми распределения результатов (теперь – медленно плывущих), мы получим «плывущие» веса.

Из всех неприятностей произойдет

именно та, ущерб от которой больше.

Артур Блох. Третье следствие из Закона Мэрфи

Несложно предположить, куда «плывут» веса заданий:

«разочаровавшиеся» претенденты нажимают клавиши случайно и, в соответствии с законами случайности, все задания будут выполнять ими, правильно и неправильно, равномерно;

«стремящиеся к успеху» претенденты, рано или поздно, узнают все верные варианты выполнения заданий и выполнят все верно;

«середняки» вносят разнобой в описанную равновероятность, однако их количество постепенно уменьшается за счет продолжающегося самообучения.

Следовательно, веса «плывут» друг к другу, постепенно становясь равными.

На процесс «плавания» могут влиять артефакты, скажем такой: одна часть участников поверили своему учителю, научившему их ответам на вопросы теста, другая часть – соседу студенту, который решил задания по-своему. В итоге, совершенно случайно, часть заданий частью претендентов будет в течение нескольких сеансов выполняться неверно, то есть окажется очень сложной для совершенно конкретного и неизменного количества претендентов.

Может быть, мы просто не замечаем «объективной реальности»? Может, человек не машина, и к нему нельзя подходить с «технарскими» мерками и определениями? Может, лучшая тестовая технология как раз та, которая прекрасно выполняет дидактическую функцию, где результаты претендентов растут, и, чем быстрее – тем лучше? Или та, где веса заданий, многократно пересчитываемые при многократных тестированиях, становятся равными быстрее? Ведь главная цель дидактики как раз в этом и состоит – научить учащихся путем тренировок. Чем быстрее растут результаты – тем лучше применяемая технология (тест + программный комплекс + сценарий сеанса) приспособлена для тренировок, тем выше ее дидактическая ценность.

Свойство, отражающие скорость роста результатов претендентов, вполне можно назвать релевантностью, т. е. степенью соответствия теста дидактическим целям. А соответствующий коэффициент – коэффициентом релевантности.