Анонимное тестирование кандидатов в судьи: как это было

5 июня 2012 г. в Киеве состоялся первый этап отбора кандидатов на должность судьи впервые в соответствии с новой системой - анонимное тестирование. Нужно отметить, что все кандидаты в этом году проходили тестирование в одном месте, а не в разных городах, как это было раньше. Впервые в Украине более 3500 человек собрались для сдачи экзамена под одной крышей. И влетело такое тестирование державе в копеечку - 0,5 млн грн. Эта сумма включает аренду помещения для проведения тестирования (тестирование проходило в Международном выставочном центре), печать тестовых материалов, приобретение сопутствующих товаров и услуг (тиражирование, транспортировка материалов). Но главная особенность анонимного тестирования 2012 г. заключалась в том, что на работах (бланках) не использовались штрих-коды. ВККС, позаимствовав опыт польских коллег, применила «генерацию персонального цифро-буквенного кода» - кандидаты собственноручно заносили свой код в бланк. При обработке и оглашении результатов тестирования «высвечивались» только код (по которому кандидат мог себя идентифицировать) и количество набранных баллов.

Вопросы для тестовых заданий были сформированы с помощью специальной программы по принципу случайности. Всего два кандидата набрали по 94 балла из 100 возможных (100 вопросов теста) - это был максимальный результат. Самым низким стал результат в 20 баллов. 50 баллов и более набрали 2716 человек. При этом в 2012 г., несмотря на примерно такое же количество кандидатов и вакантных мест, как и в 2011 г. (3385 кандидатов и 686 вакансий соответственно), проходной балл был 63 - члены ВККС решили, что это достаточное количество правильных ответов, чтобы кандидат успешно прошел тестирование. По информации Квалифкомиссии, успешно сдали анонимное тестирование 1181 человек. Для сравнения: в прошлом году к участию в квалифэкзамене не допускались кандидаты, набравшие менее 75 баллов.

Сам процесс проведения столь масштабного мероприятия потребовал от членов и работников Высшей квалифкомиссии не только финансовых, но и морально-физических затрат. Например, были задействованы все работники ВККС, большая часть из которых выполняла роль уполномоченных Комиссии в секторах (для того, чтобы зарегистрировать и посадить на свои места 3564 кандидатов, было сформировано 68 секторов). По словам главы ВККС Игоря Самсина, была проведена огромная работа, чтобы одновременно и успешно провести анонимное тестирование: «Наши сотрудники и эксперты обеспечили объективность равными для кандидатов условиями по продолжительности экзамена, по количеству и уровню сложности тестовых вопросов, едиными критериями оценки экзамена».

После того, как кандидаты получили при регистрации бланки с кодами и заняли свои места, в помещение в присутствии журналистов и независимых наблюдателей были доставлены опломбированные ящики с тестами, упакованные в сейф-пакеты. Секретарь ВККС Анатолий Марцинкевич вскрыл ящики с сейф-пакетами и вручил каждому уполномоченному бланки тестов в необходимом количестве. Когда все тестовые задания были розданы, началось само тестирование, которое длилось несколько часов. По итогу тестирования были составлены акты, в которых указывались номер сейф-пакета и количество помещенных в него ответов на тесты. Затем под наблюдением прессы, независимых наблюдателей и кандидатов сейф-пакеты вскрывались, листы с ответами сканировались и обрабатывались - определялось количество правильных ответов.

Стоит отметить, что во время подготовки и самого теста Комиссия тесно сотрудничала с экспертами-тестологами. Их задачей было проанализировать надежность теста - насколько он может измерить уровень общих теоретических знаний, как того требует закон. Согласно подсчетам, тест при идеальном значении 1 показал 0,85-0,86 (так называемый коэффициент Альфа Кромбаха). Эксперты заключили, что качество теста очень высокое. Психометрический анализ результатов ответов всех кандидатов также показал, что в составе теста не было вопросов, которые по итогам тестирования было необходимо дисквалифицировать. Но не обошлось и без неприятностей - некоторые кандидаты не смогли найти в результатах тестов свой персональный код. По информации ВККС, это связано с тем, что во время обработки автоматизированной системой отсканированных бланков ответов были обнаружены неправильно заполненные бланки (неверно записан персональный код или вариант тестовой тетради). Сейчас Комиссия отбирает такие бланки из общей массы, затем каждый бланк будет детально изучен. Решение будет приниматься в каждом конкретном случае отдельно.

Следующий отбор (при наличии в судах вакансий и при отсутствии кандидатов в резерве) ВККС будет планировать в 2013 г.

Фотоотчет

Егор Желтухин,

«Судебно-юридическая газета»