Не исключаю возможность ошибочности моего мнения по данному поводу, но вот так я себе представляю эту проблему и, в общем, развитие любого из коммерческих тестов. Для большей наглядности опишу одну из частей известного теста SHL (числовая часть) и разобью свою мысль на этапы развития и продвижения в массы.
Здесь никаких претензий нету (сам составлял тесты, тогда-то я и понял всю абсурдность тестирования в том виде, в котором оно сейчас существует). Собирается много умных людей, думают над классами вопросов, придумывают в каждом классе несколько категорий, в категориях продумывают вопросы.
Собирается куча людей, максимально абстрагированных друг от друга, каждый проходит тестирование (видя его впервые в жизни), собирается статистика, делаются выводы, одобряется.
Тест создан, статистика собрана, облщестлвенность оценила. Вот тут и возникает та самая проблема, о которой я говорил ранее. Чтобы что-то продать, нужно сначала объяснить, что это такое, потом дать сами тесты с определенным количеством стандартных (!) вопросов, дать ответы, показать статистику, объяснить, что есть что, в общем. Первое заблуждение начинается уже здесь - все почему-то считают, что результаты, полученные от первых испытуемых, будут в среднем такими же, как и результаты последующих тестирующихся. Это заблуждение! Первые испытуемые не знали, что им предстоит делать и в каком тестировании участвовать, не знали, какие будут вопросы, и так далее. А в реальности получается, что тесты попадают в компании, нанимающие при помощи них своих новых сотрудников и проверяя старых, - и все бы ничего, но после выхода теста в массы информация о нем появляется незамедлительно, и, зная примерные вопросы, можно получить приличную фору относительно человека, который о тесте не знал заранее, и не знал, какие будут вопросы, что нужно делать и как делать. В итоге тот же самый "SHL числовой" профессор мат. наук может пройти хуже, чем школьник, натасканный на определенный спектр задач. Где справедливость и объективность?
С уважением,
Александр Кострюков
Виктор Васильев: Совершенно согласен, это огромная проблема. Способ тестирования может приводить к радикальной деформации самого содержания подготовки. Вот, например, идиотская система тестов с выбором ответа в ЕГЭ превращает школьное образование в систему подготовки к угадыванию ответов в этих дурацких тестах. И никто не может объяснить, зачем именно эти тесты с выбором ответа тут необходимы. То есть какое-то количество обоснований я слышал, но все они никуда не годятся; более того, ясно, что те, кто их проталкивает, и сами понимают, что они никуда не годятся. Например, постоянно повторяется, что ученики, знающие предмет, должны хорошо отвечать и на эти тесты. Это утверждение бесспорно, но речь как раз и идет о том, что подготовка к этим тестам страшно бьет по самой возможности появления учеников, действительно знающих предмет. Также и мои любимые ученые тестологи изо всех сил трудятся, обосновывают необходимость этой пакости, приводят какие-то выкладки, которые при подробном рассмотрении оказываются полной срамотой. Еще один довод - о недопустимой технологической сложности и дороговизне любых более разумных способов приема массового экзамена - также ПОЛНОЕ ВРАНЬЕ, говорю со всей ответственностью. Создается впечатление, что цели какие-то есть, но совсем не те, что декларируются. Возможно, просто какое-то начальство с самого начала поленилось подумать головой и организовать экзамен по-умному, а теперь не хочет радикально менять, потому что это означало бы признание своего недомыслия по слишком важному вопросу. Есть, конечно, и другие версии. Главное, что к самой исходной идее централизованного экзамена эти идиотские тесты никакого отношения не имеют.