Тридцать три принципа конструирования теста, создания тестовых заданий и выбора технологии тестирования

Никто не несет наказания за мысли.

(положение Римского права)

Педагогическое тестирование имеет довольно хорошо разработанную принципиальную базу. Она очень хорошо описана в научной и научно-методической литературе. Но, к сожалению, нам не удалось встретить ни одного учебного пособия, где бы была систематически изложена вся совокупность принципов, поэтому здесь мы ее публикуем впервые.

Валидность теста. Результаты тестирования группы претендентов должны соответствовать объективным характеристикам, данным претендентам их руководителями, коллегами, преподавателями. Это важнейший принцип, которому должны быть подчинены усилия составителя теста. В соответствии с множеством указанных характеристик, принято различать виды валидности.

Надежность теста и технологии тестирования. Результаты тестирований подобных групп претендентов с помощью одного теста должны быть одинаковыми (подобными) и не зависеть от времени. Это второй по важности принцип, которому должны быть подчинены усилия составителя теста. Чаще всего, надежность можно охарактеризовать лишь умозрительно, поскольку:

повторное тестирование одной группы претендентов по одному тесту приводит к росту результатов за счет эффектов памяти, самообучаемости и пр.;

очень трудно найти подобные группы претендентов и доказать, что это так;

на результаты оказывает влияние предыстория групп претендентов, технические сложности исключения предварительного общения между ними и пр.

Надежность – принцип, пришедший в педагогику из техники. Это принцип, предъявляемый к инструменту технического измерения. Но педагогика – иная область с иными закономерностями, и поэтому принцип надежности часто обоснованно подвергается критике (см. релевантность теста).

Релевантность теста и технологии тестирования. Выберем два одинаковых по валидности теста (или, точнее, две технологии тестирования). С точки зрения дидактики, науки подчиняющей всё цели росту качества обучения, если повторное тестирование с использованием первого теста (первой технологии) приводит к более выраженному улучшению результатов, чем с использованием второго теста (второй технологии), то первый тест (первая технология) – лучше. Пусть результаты в обоих случаях улучшаются по-разному за счет разной выраженности эффекта самообучаемости претендентов, привлекательности процедуры и др. С точки зрения принципа надежности, оба теста (обе технологии) – не надежны. Чем лучше тест (технология тестирования) с точки зрения дидактики, тем он (она) хуже, исходя из принципа надежности. Поэтому, в педагогике, в отличие от техники, лучше говорить не о надежности теста (технологии), а о релевантности теста (технологии), т. е. степени соответствия принципам дидактики. Релевантность теста (технологии тестирования) – мера его способности к инициации процессов самообразования. Релевантность можно выразить численно, взяв отношения прироста усредненных результатов при повторном тестировании с использованием разных тестов (технологий).