Секреты психометрии

«Угадывая ответ, не обязательно выбирать третий вариант ответов»: раскрываем секреты психометрического экзамена.

Представьте себе: вы сдаете важный экзамен, составленный по принципу множественного выбора, и доходите до задачи, которую не можете решить. Тут вы вспоминаете, что, по расхожему мнению, не зная, какой ответ верный, стоит выбрать один из вариантов «посередине» – только не первый и не последний. Иногда вы просто выбираете третий вариант ответов, так как ходят слухи, что вероятность того, что он верный очень высока.

Журналисты популярного сайта mako.co.il посетили Израильский Центр Экзаменов и Оценки, здание, которое получило прозвище «Атомного убежища психотестов», чтобы задать этот и другие вопросы составителям самого важного израильского экзамена.

Когда поднимаешься по лестницам четырехэтажного здания в Еврейского университета в иерусалимском квартале Гиват Рам, создается обманчивое впечатление – с одной стороны старые офисы заполнены кадками с растениями, есть библиотека и уголки отдыха – а с другой – строение представляет настоящий лабиринт. По три входа на каждый этаж, двери накрепко заперты и доступ в каждую зону строго регламентирован – как будто за этими дверями хранятся топ–секреты. В этих комнатах на самом деле создается один из самых секретных и защищенных проектов Израиля.

Здесь расположен Израильский Центр Экзаменов и Оценки (ИЦЭО), организация, отвечающая за составление и проведение психометрии. Необходимость этого экзамена неоднократно оспаривалась, более того – в прошлом его даже пытались отменить. Вместе с этим составители этого экзамена – совсем не те, кого вы представляете, они не ставят своей задачей «проучить вас».

«Не верьте слухам, правильный ответ определяется случайным образом!»

Ницан Фридман и Ширли Зарвив – самые молодые работники в ИЦЭО. Именно они отвечают за ваши экзамены последних лет. Чтобы доказать, что то, что вы думали о психометрии – не верно, Ницан достает из кармана кубик с цифрами и показывает, что для того, чтобы определить, какой вариант ответов будет верным, просто подбрасывает кубик.

Перед тем, как задуматься над тем, какой вариант ответов – верный, нужно понимать, что работа над каждой задачей занимает несколько часов, а иногда и дней и перед тем, как попасть в настоящую психометрию, вопрос проделывает долгий путь.

Первый этап – разработка концепции, идея. После того, как задача сформулирована, она попадает  к редакторам. «Задача экспертов этого отдела – «зарубить» все, что мы написали,» – смеется Ширли – «доказать, что вопрос некорректный или есть амбивалентность в формулировке. Они все очень милые, но они часто выводят нас из душевного равновесия.»

После того, как составители завершают свою работу, вопрос включается в проверочный экзамен, где определяется, не получился ли этот вопрос слишком легким или слишком сложным, после чего принимается решение о том, включать ли задачу в настоящий психометрический экзамен. «Бывает, что задача прошла все проверки, но мы все равно от нее отказываемся, так как она кажется нам опасной,» – объясняет Ширли. «Именно в этом и заключается наша работа, заботится о том, чтобы все задачи были максимально корректными, и чтобы в них не было ошибок.»

Идеи для задач – которые определяют, что вы будете учить и где – Ницан и Ширли черпают из повседневной жизни, встреч с друзьями, Фейсбука и музыки. Вы будете удивлены, узнав, что однажды даже одна из песен Ноа Кирэл чуть не попала в один из психотестов. «Друг однажды подкинул мне идею для задачи в психометрии – фразу, которую Илан Пелед поет в новой песне Ноа Кирэл «бесплатный сыр только в мышеловке», – рассказывает Ницан и объясняет, как это может превратиться в задачу вступительного экзамена:

Ницан утверждает, что и популярная сатирическая передача «Эрец Неедерет» связана с психотестом. «В прошлом, с вопросом с выражением יוצא חוצץ (категорически (против чего–л.)) у абитуриентов всегда возникали трудности», говорит Ницан. «Но в определенный момент количество неправильно отвечавших на этот вопрос стало стремительно падать, все больше абитуриентов просто знали правильный ответ. Мы предположили, что это произошло из–за того, что в «Эрец Неедерет» была пародия Таля Фридмана на Шели Ехимович, которая повторяла «אני רוצה לצאת חוצץ» и люди это запомнили.»

И Ширли, и Ницан попали на эту работу одна за другим, после того как закончили факультет психологии. Чтобы попасть сюда не нужно заканчивать какой–то определенный факультет. «Здесь есть специалисты из разных областей,» – говорят они. «Определенное образование не так важно, важен тип мышления, педантичность, внимательность по отношению к малейшим нюансам, которые кому–то покажутся несущественными, а мы их заметим и будем с ними работать.»

Ширли добавляет: «Мне часто нужно заставить себя разделить мою личную жизнь и работу, потому что это нереально – так выверять каждое сообщение вотсапа, перед тем, как я отправляю его моему другу.»

А какую оценку получили сами эксперты?

Ницан получил 780, а Ширли 717. Но оба стараются успокоить: Ширли поясняет – психометрия проверяет очень специфичные навыки. «Моей оценки мне не хватило, чтобы поступить туда, куда я хотела,» – говорит она – «но в итоге я начала учиться на другом факультете, и я очень–очень довольна. Оценка за психометрический экзамен не диагностирует человека как успешного или неудачника. Это прогнозирует только успехи в учебе на первом году обучения в университете, а люди принимают это слишком близко к сердцу.»

«Последний год был адом».

Скоро очередной психотест, на этот раз в обычном режиме – и это после полутора лет пандемии, когда впервые за сорок лет проведения экзаменов возникали нештатные ситуации, с которыми приходилось справляться команде ИЦЭО.

«Мы не можем позволить себе ошибиться», – говорит Кути Вайс, глава оперативного отдела ИЦЭО. «Наша психометрия проходит как полноценная военная операция. Ни разу не случалось, чтобы абитуриенту не хватило брошюры и всего остального для того, чтобы написать экзамен спокойно, ноль сбоев. Брошюры печатают у нас же, в нашем здании и хранят на защищенном складе – как в атомном бомбоубежище.» Последний год работы он может подытожить только одним словом – «ад!».

«Чтобы психотест прошел по плану, нужно подготовить очень многое. Любое изменение планов требует гибкости, которая для нас – недопустимая роскошь», – объясняет Вайс. «Нам приходилось вносить изменения в последний момент, в том числе: арендовать дополнительные классы, нанимать еще экзаменаторов, инструктировать их, печатать десятки тысяч брошюр и заботится о том, чтобы эти брошюры самым надежным способом попали в классы в день экзамена. В период коронавируса приходилось работать вдвойне – из–за социальной дистанции и работников, которые в последний момент попадали в карантин.»

«Каждый год психометрию сдают десятки тысяч человек. Для большинства из них это первый экзамен ИЦЭО, что заставляет нас относиться к каждому экзамену самым серьезным образом», – говорит генеральный директор Израильского Центра Экзаменов и Оценки доктор Анат Бен Симон. «Поэтому, в силу высокой ответственности по отношению к девушкам и юношам в начале их академического пути, нам важно было, несмотря на все трудности пандемии, оставаться надежным убежищем в бушующем океане и провести все заявленные экзамены – любой ценой.»

С 1981 года более двух с половиной миллионов израильтян сдавали психометрию. Сорок лет назад комиссия глав израильских вузов создала Израильский центр экзаменов и оценки чтобы помочь приемным комиссиям университетов в подборе кандидатов на получение высшего образования в Израиле. Большинство сдающих психотест – женщины.

Как при записи на любой экзамен, так и на психометрию записываются те, кто просят предоставить определенные привилегии во время проведения теста, привилегии, которые иногда заставляют ИЦЭО попотеть.

«Есть абитуриенты, которые из–за проблем со спиной или других медицинских противопоказаний просят сдавать экзамен лежа,» – рассказывает доктор Анат Бен Симон, генеральный директор ИЦЭО. «Мы предоставляем им специальный матрас или носилки, на которых они могут лежать по время психометрии.

Кто–то просит специальное устройство для увеличения шрифта в экзаменационной брошюре, мы арендуем такие у организации «Яд Сара». Один пилот попросил сдавать экзамен на открытом пространстве из–за клаустрофобии. Просьбы самые разнообразные и очень многочисленные. Говорят, что мы специально составляем экзамены исключительной сложности, что не идем навстречу абитуриентам – это совершеннейшая чушь.»

Если на этот раз психотест пройдет без сюрпризов, после окончания экзамена бланки ответов попадут в отдел оценки, возглавляемый доктором Ави Алалуф, заместителем генерального директора ИЦЭО. Сотрудница отдела, Андреа Абрамзон, рассказывает, что после того, как бланки ответов возвращаются в здание ИЦЭО в иерусалимском районе Гиват Рам, их сканируют специальным сканером, который распознает ответы на каждый вопрос и умеет обратить внимание экспертов на нечетко отмеченный ответ. Но тут работа отдела оценки ИЦЭО только начинается.

Несмотря на то, что каждому экзамену предшествует подробный инструктаж, на котором эксперты расскажут о том, как именно отмечать правильный ответ, всегда найдутся абитуриенты, креативность которых выходит за рамки стандарта ИЦЭО. «Точка, черточка, кружок вокруг, отметка ручкой, сердечки,» – вспоминают Ави и Андреа наиболее интересные случаи. «Однажды мы видели бланк ответов, в котором абитуриент отметил все варианты ответов во всех задачах – мы не поняли, что он имел в виду.»

Помимо простых попыток «выбить» побольше правильных ответов, в бланках скрыты и разные тайные знаки: «На полях бланков ответов, между строк, мне пишут послания, такие как «я очень устал», «экзамен слишком сложный» или рисуют сердечки.» Самое трудное – видеть на бланках свидетельства борьбы с психотестом: «Капли кофе, крошки печенья, пятна шоколада, остатки жвачки – классика – но как нам приходится помучаться, чтобы разделить склеившиеся бланки ответов!» – рассказывает Андреа.

После публикации оценок наступает момент обращений и жалоб. Примерно сто апелляций подается после каждого захода психометрии и это только увеличивает существующую нагрузку: ежегодно наш отдел жалоб и обращений рассматривает примерно 10.000 жалоб на разные экзамены, проводящийся ИЦЭО. Около 14% жалоб, связанных с психометрией, признаются оправданными. Жалуются не только на задачи. «Однажды с гипсового потолка аудитории на стол абитуриента свалилась кошка,» – вспоминает Эти Коэн из отдела обращений ИЦЭО. «Он испугался и потерял несколько дорогих минут на экзамене. Когда все факты подтвердились, мы предоставили пострадавшему возможность пересдать психометрию.»

«После экзамена ИЦЭО получает самые разнообразные жалобы. «Было слишком холодно или жарко, мешали различные представители фауны – в классе был таракан, пчела, мешало кудахтанье кур,» – мы внимательно рассматриваем все обращения и со всей серьезностью определяем, как поступить с данной жалобой – принять или отклонить», – объясняет Коэн. «Это похоже на работу психолога, очень помогает, когда тебя выслушали.» Но иногда жалобы переходят на повышенные тона. «Бывает, что абитуриенты очень взволнованы после экзамена и звонят, чтобы «выпустить пар». Время от времени приходится вести очень неприятные беседы». Она вспоминает: «Одна девушка в истерике около часа плакала мне по телефону, говоря о том, что чувствует, что завалила экзамен, мне оставалось только выслушать её.»

Но ошибаются не только абитуриенты. Давным–давно в ИЦЭО позвонил абитуриент, который утверждал, что на один из вопросов было два правильных ответа. «Мы подумали – да ладно, он наверное и так уже все понял», – вспоминает Ави. «Но мы всегда должны все проверить и на действительно, после беседы с составителями задачи выяснилось, что абитуриент прав. Более того – мы обнаружили, что это была его единственная ошибка в экзамене, то есть после того, как задача была исключена из подсчета оценки для всех, кто сдавал этот психотест, все ответы у этого юноши были верные и он стал первым, кто получил 800 за психотест». С тех пор 124 человека получили оценку 800, причем одна из них получила эту оценку дважды.

Сотрудники ИЦЭО вспоминают о наиболее часто повторяющихся претензиях: «Вас интересуют только деньги», «тебе что, нравится вредить людям?», «за что вам вообще деньги платят?», «сделайте мне экзамен полегче». Но сейчас и те, кто сдает психометрию, и те, кто пишут задачи, и те, кто проводят психотесты могут согласиться – бесплатный сыр только в мышеловке, а если хочешь на самом деле чего–то добиться, нужно много работать. Ну или надеяться, что вы угадали, какой вариантов ответов выпал на кубике.

Статься переведена отделом исследований и разработок учебного центра Окей.

Ссылка на источник на иврите.