Существуют разные подходы к вычислению весов заданий, нацеленные на «исправление» кривой распределения. Задача такого исправления математически сложна, и не каждый из разработанных способов исправления приводит к желанному результату.

Так и должно быть, поскольку исходные положения теории основаны на предположении об однородности групп претендентов, т. е. статистически «гладком» распределении среди них ЗУН. А это случается не всегда. Например, возьмите группу, где четверть претендентов умеет в совершенстве решать задачи только по одной теме физики, три четверти – только по двум. Тестирование такой группы с помощью усредненного по темам теста приведет к удивительным результатам, из которых трудно сделать монотонную одногорбую кривую.

Вычисленные веса могут сильно зависеть от того, как сформирована группа претендентов. Это означает, что каждое новое тестирование, с новой группой претендентов, должно сопровождаться решением задачи вычисления весов вновь. А результаты этих двух тестирований нельзя будет однозначно сопоставить.

Какой смысл имеют веса, можно ли использовать их значения для решения иных задач, более значимых, чем подгонка кривой распределения под установленную волюнтаристски форму?

Вернемся к традиционной задаче объективного оценивания подготовки учащихся и распределения их по трем-четырем группам в соответствии с их уровнями. Кривая распределения результатов с одной вершиной, как бы она не была математически и эстетически красива, не дает оснований для объективного ответа на вопрос о том, где же объективно провести границы групп.

Опытный тестолог поделит учащихся с помощью простого алгоритма, давно придуманного и повсеместно применяемого:

протестируйте учащихся и получите кривую распределения результатов;

присвойте всем учащимся рейтинги и составьте список учащихся в соответствии с рейтингами - от высшего к низшему;

определите, сколько учащихся может учиться в группе лучших (допустим – 20);

первых 20 учащихся в рейтинговом списке определите в первую группу, вторую двадцатку во вторую, третью – в третью и т.д.;

если необходимо поставить оценки, поставьте первой группе «пятерки», второй – «четверки», третьей – «тройки», остальным – что осталось.

Задача распределения, на первый взгляд, успешно решена.