Здесь под сепарабельностью мы понимаем способность экзаменационной оценки описывать разные свойства претендента не только в совокупности, но и по отдельности.

Что измеряют в процессе тестирования?

Все силы отдай, чтобы выполнить точно расчет,

Но знай: небеса не приемлют научный подход.

Уильям Вордсворт (перевод Л. Владимирова)

В настоящее время используют три метода обработки и анализа результатов тестирования:

классический;

IRT (Item Response Theory);

наглядный.

Два первых подхода базируются на статистической обработке так называемого «сырого» балла, то есть балла, набранного испытуемым в результате тестирования. Обработка включает

определение трудности или «веса» каждого задания, т. е. числа, отражающего количество участников с ним справившихся;

пересчет результатов – «сушка сырых баллов».

Наглядные методы, как правило, не включают промежуточной обработки и позволяют участнику увидеть результат сразу после сеанса.

Люди, применяющие наглядные методы, экономят свое и чужое время, и опираются при этом на свой опыт, говорящий:

если задания составлены и «взвешены» опытным преподавателем, то никакая статистическая обработка не повлияет существенно на результаты тестирования;

какие бы системы пересчета баллов не применялись, все равно вверху рейтинговой таблицы фигурируют, слегка меняясь местами, одни и те же учащиеся.

Нельзя с ними не согласиться. «Сушка сырых баллов» после завершения тестирования с добротно созданным тестом действительно требует больших трудозатрат и редко приводит к существенным изменениям в рейтинговых таблицах. Пример тому – российский опыт проведения тестирований «Телетестинг», ЦКТ, ЕГЭ. Опытные члены жюри традиционных олимпиад, которым приходится иметь дело с разными системами пересчета баллов, придерживаются часто такого же мнения.

Математический аппарат классической теории проще, чем аппарат IRT, там возможен обсчет даже с помощью калькулятора, хотя удобнее воспользоваться специальными программами.

Считается, что классическая теория имеет ряд недостатков, главный из которых – большая, чем в IRT, зависимость результатов измерения от инструмента измерения (теста).

Качественный анализ хорошо представленных результатов наглядно демонстрирует успешность учебного процесса, дает возможность оптимизировать корректировку содержания и методики обучения. Используя результаты каждого испытуемого, можно индивидуализировать обучение.