Не исключаю возможность ошибочности моего мнения по данному поводу, но вот так я себе представляю эту проблему и, в общем, развитие любого из коммерческих тестов. Для большей наглядности опишу одну из частей известного теста SHL (числовая часть) и разобью свою мысль на этапы развития и продвижения в массы.
Этап первый - разработка
Здесь никаких претензий нету (сам составлял тесты, тогда-то я и понял всю абсурдность тестирования в том виде, в котором оно сейчас существует). Собирается много умных людей, думают над классами вопросов, придумывают в каждом классе несколько категорий, в категориях продумывают вопросы.
Этап второй - сбор статистики, подсчеты, одобрение
Собирается куча людей, максимально абстрагированных друг от друга, каждый проходит тестирование (видя его впервые в жизни), собирается статистика, делаются выводы, одобряется.
Этап третий - продвижение и применение на практике
Тест создан, статистика собрана, облщестлвенность оценила. Вот тут и возникает та самая проблема, о которой я говорил ранее. Чтобы что-то продать, нужно сначала объяснить, что это такое, потом дать сами тесты с определенным количеством стандартных (!) вопросов, дать ответы, показать статистику, объяснить, что есть что, в общем. Первое заблуждение начинается уже здесь - все почему-то считают, что результаты, полученные от первых испытуемых, будут в среднем такими же, как и результаты последующих тестирующихся. Это заблуждение! Первые испытуемые не знали, что им предстоит делать и в каком тестировании участвовать, не знали, какие будут вопросы, и так далее. А в реальности получается, что тесты попадают в компании, нанимающие при помощи них своих новых сотрудников и проверяя старых, - и все бы ничего, но после выхода теста в массы информация о нем появляется незамедлительно, и, зная примерные вопросы, можно получить приличную фору относительно человека, который о тесте не знал заранее, и не знал, какие будут вопросы, что нужно делать и как делать. В итоге тот же самый "SHL числовой" профессор мат. наук может пройти хуже, чем школьник, натасканный на определенный спектр задач. Где справедливость и объективность?
С уважением,
Александр Кострюков
Виктор Васильев: Совершенно согласен, это огромная проблема. Способ тестирования может приводить к радикальной деформации самого содержания подготовки. Вот, например, идиотская система тестов с выбором ответа в ЕГЭ превращает школьное образование в систему подготовки к угадыванию ответов в этих дурацких тестах. И никто не может объяснить, зачем именно эти тесты с выбором ответа тут необходимы. То есть какое-то количество обоснований я слышал, но все они никуда не годятся; более того, ясно, что те, кто их проталкивает, и сами понимают, что они никуда не годятся. Например, постоянно повторяется, что ученики, знающие предмет, должны хорошо отвечать и на эти тесты. Это утверждение бесспорно, но речь как раз и идет о том, что подготовка к этим тестам страшно бьет по самой возможности появления учеников, действительно знающих предмет. Также и мои любимые ученые тестологи изо всех сил трудятся, обосновывают необходимость этой пакости, приводят какие-то выкладки, которые при подробном рассмотрении оказываются полной срамотой. Еще один довод - о недопустимой технологической сложности и дороговизне любых более разумных способов приема массового экзамена - также ПОЛНОЕ ВРАНЬЕ, говорю со всей ответственностью. Создается впечатление, что цели какие-то есть, но совсем не те, что декларируются. Возможно, просто какое-то начальство с самого начала поленилось подумать головой и организовать экзамен по-умному, а теперь не хочет радикально менять, потому что это означало бы признание своего недомыслия по слишком важному вопросу. Есть, конечно, и другие версии. Главное, что к самой исходной идее централизованного экзамена эти идиотские тесты никакого отношения не имеют.
Постскриптум
Даже маленькая практика стоит большой теории.
Закон Букера
От кого: Евгений Осенчаков
Тема: IQ для Виктора Васильева
Вспомнилось: "Я понимаю вашу иронию, профессор…"
Я не математик, а музыкант, но на эмоциональном уровне вашу статью в "КТ" #737 я понял. Спасибо.
P.S. Единственное, что (насчет математиков и физиков) можно быть обыкновенным "шеловеком" и понимать, что ветер дует не потому, что деревья качаются.
Евгений Осенчаков
Виктор Васильев: Большое спасибо! Но я же и не говорю, что музыканты непременно дураки (по моим наблюдениям, в среднем скорее наоборот, хотя я и не очень понимаю причин этого). Продолжая сравнение, и я ведь не плотник, а гвозди (после девяти стройотрядов) забивать умею…
От кого: Николай
Тема: измеряем IQ
Спасибо за интереснейший номер про тесты на IQ. Баловался с переформулировками условий, и вот что получилось.
Кувшины-тракторы
Некоторые люди - пьяницы; у большинства пьяниц красные носы; все те, у кого красные носы, выглядят смешно; таким образом, некоторые из тех, кто выглядит смешно, - люди. Выглядит убедительно; более того, я точно знаю, что некоторые люди выглядят смешно, а следовательно, утверждение истинно. Но, к сожалению, строгая логика говорит, что вывод абсолютно не следует из условий, потому что пьяницами бывают не только люди (сам знал собаку-пьяницу). В таком виде, кстати, это вполне может быть селективным тестом на научное мышление, сразу отсекутся люди, следующие бытовому здравому смыслу (те, кто считает это утверждение истинным), и останутся люди, мыслящие шире и строже.
Гоблины-снежинки
Некоторые люди - негры (ничего расистского, просто констатация наглядного факта); некоторые негры хорошо играют в баслкетбол; у всех, кто хорошо играет в баскетбол, высокий рост; следовательно, все те, у кого высокий рост, - люди. В данном случае ситуация обратная первой; если в первом случае здравый смысл и бытовая логика подталкивали к неправильному ответу, то в такой формулировке задача про гоблинов предстает во всей своей беспомощности. Действительно, вывод "все, у кого высокий рост, - люди" и с позиции строгой логики, и бытовой абсолютно бредовый.
А хотя "некоторые тесты плохие" не тождественно "все тесты плохие" :)
Спасибо за то, что прочитали,
Николай
От редакции: В свою очередь, хотим сказать спасибо авторам всех отзывов - как опубликованных, так и не попавших в эту подборку. К теме же мы еще обязательно вернемся.
Автор: Илья Шпаньков
Кино, телевидение, жизнь
Адрес www.video.ru
Интерфейс русский
требуется флэш-плагин
Сайтов о кино много. Нет, не так: их очень много, ужасно много, просто не счесть, как много. И это вполне понятно: данный вид искусства стал самым популярным в мире, завоевав сердца миллиардов зрителей. Одно плохо: при попытке найти какую-нибудь информацию о новинках или о раритетных фильмах Интернет выдает столько ссылок, что разобраться в них бывает непросто. Впрочем, иногда делаются попытки как-то упорядочить всю информацию, собрав все самое интересное в одном месте. К таковым относится и портал Video.ru. Здесь есть практически вся информация о том, что было, происходит или будет происходить в мире кино и телевидения. Для общения с другими участниками сервиса можно воспользоваться системой блогов, но есть и более интересное занятие: вы можете выступить в роли режиссера и показать окружающим свои видеоролики. Ну, или снятые кем-то другим - почему бы не поделиться удачной находкой с друзьями?
Музыка без нагрузки
Адрес elebom.com
Интерфейс русский
флэш-плагин не требуется
Да, Elebom.com - обычный поисковик, адаптированный для поиска музыкальных композиций. Казалось бы - ничего особенного, но на самом деле есть несколько деталей, которые заставляют получше присмотреться к нему. Для начала - нет рекламы. Впрочем, на этом минимализм и кончается: результаты поиска представляются в виде подробного списка доступных к загрузке композиций, а дополнительно на странице результатов размещаются ссылки на группы, играющие в похожем стиле или связанные с найденными произведениями каким-либо другим способом. Также все результаты поиска по альбомам снабжены уменьшенными эскизами обложек, что еще больше облегчает поиск нужной композиции. И еще одна интересная опция - возможность поиска только по базе данных популярного сервиса "Вконтакте", что делает данный поисковый сервис более привлекательным для постоянных участников этой социальной сети.
Автор: Илья Шпаньков
Говорит и показывает
ОС Windows, Linux
Адрес linphone.org/index.php/eng
Версия 3.0.0
Размер 8,5 Мбайт
Интерфейс многоязычный (русский не поддерживается)
Цена бесплатно
