После первого сеанса, если тест «достаточно» хорош, а группа претендентов «достаточно» представительна и велика, согласно канонам тестологии, должно получиться следующее распределение результатов:

Рис. 5.

Каноны тестологии (теории IRT) требуют, чтобы вершина у кривой распределения была одна. Начинаться она должна от нуля, затем переваливать через вершину и плавно снижаться к нулю на границе 100%. Так оно иногда и происходит. Если в группе претендентов 300-400 человек и более, претенденты мотивированы, задания заранее не известны, свойства претендентов более-менее однородно распределены, то график получится более-менее плавным, как на этом рисунке (Рис. 5.).

Бывает и иначе. Скажем при тестировании по какой-либо коллективно «нелюбимой» дисциплине или при отсутствии у претендентов мотивации:

Рис. 6.

Здесь вершина распределения расположена над неким средним значением, которое получится, если проходить тестирование методом случайного «тыка». Ширина кривой в этом случае зависит от свойств самого теста и может быть вычислена по стандартным формулам теории ошибок.

А бывает и так, что в группу претендентов попали учащиеся с существенно разным уровнем и спектром ЗУН. Скажем, когда школьники гуманитарного и физико-математического класса одновременно тестируются по тригонометрии. Кривая может стать двугорбой:

Рис. 7.

Горб, что поближе к нулю, соответствует гуманитариям, а другой, подальше – физикам и математикам. Горбы могут быть разделены резко, а могут и слиться в широкую вершину. Степень различения горбов зависит от свойств теста и учебной программы, которую выполнили претенденты.

Можно предположить и другие ситуации, когда кривая распределения результатов будет многогорбой. Тестологи, как правило, «отметают» такие случаи, говорят, что выборка непредставительная, претендентов мало и вообще – претенденты попались не те, что надо.

Причина «любви» тестологов к одногорбым кривым лежит у истоков IRT – одной из распространенных теорий, описывающих результаты тестирований. Именно с IRT они «впитывают» «технарские» идеи о надежности, репрезентативности и пр., именно подружившись с IRT, тестологи начинают жить в фантастическом мире «надежностей» и «репрезентативностей». В этом – истоки сюрпризов, которые преподносит тестологам обычная «серая» повседневность.