Верификатор егэ оплата

Рейтинг: 5 — количество голосов за статью

Публикация:
29.01.2012,
в категории «Образование»

Просмотр: эта статья прочитана 9109 раз

    Часто многие люди задаются такими вопросами: кто такой верификатор? Что такое РЦОИ? Чтобы было понятно для всех — это региональный центр обработки информации, куда стекаются все работы выпускников после экзамена. А вот верификатор , это и есть ответственный труженик РЦОИ, и является самым главным человеком во всём процессе экзамена. От верификатора тут зависит все. Его роль настолько же важна, насколько и трагична. Когда ваши бланки привезли в РЦОИ, они вместе с бланками других участников экзамена попадают в сканер, где ваши ответы распознаются и вносятся в специальный файл.

 У многих прекрасный, чёткий, разборчивый почерк, которым вы безукоризненно напишете все необходимые крестики, буквы и цифры. К сожалению, таким замечательным почерком могут похвастаться далеко не все. Есть некоторые люди, которые цифры 1, 4, 7 пишут совершенно одинаково. Более того, они на письме практически не различают цифры 3 и 5, да и к буквам А и Д, Л и П подходят универсально. И если программа, распознающая ответы, натыкается на такой универсализм, она начинает сомневаться. Разрешение своих сомнений программа предоставляет верификатору. Вот тут и начинается труд верификатора. Veritas — по латыни истина. Вот ещё с чем должны обязательно ознакомиться все абитуриенты и студенты.

 Тем самым верификатор — искатель истины. Он внимательно рассматривает подозрительную закорючку на бланке или донельзя исчерканные и трижды обведенные знаки и пытается определить, что же это такое хотел сказать автор . При этом верификатор руководствуется здравым смыслом и иногда интуицией. Но даже опытнейшему верификатору замысел автора удается выявить далеко не всегда. И тогда верификатор вписывает в поле ответа то, что ему лишь мнится, надеясь, что ангелы нашептали ему верное решение. Упражнение. Догадайтесь, что это за буквы? А между тем ничего загадочного нет. Вот как выглядел ответ в исполнении одного выпускника до верификации.

 Сверху — предположения компьютера. Только усилия верификатора позволили восстановить заветное слово. Так выглядит результат после верификации. Бывает так, что программа распознавания ошибается, но не испытывает никаких сомнений. В приведенном примере компьютер абсолютно однозначно прочел первую букву как Е, а третью как О. И если бы не сомнительные буквы У, С и Л (которые на самом деле Т, О и А), слово не попало бы на верификацию, и тогда никто не нашел бы и не смог исправить ошибку. Остается лишь заметить, что в горячую пору рабочий день верификатора не нормирован. И к концу суток непрерывной верификации глаз его может помутнеть, а рука — дрогнуть.

 В результате в поле ответа появляется число или слово, которое не имеет никакого отношения к замыслу автора работы. Очень хорошо, что, Вы, отчетливо осознаете, как хорошо, что у вас четкий и разборчивый почерк. Я уверен, что вы подойдете к заполнению бланка ЕГЭ со всей ответственностью и приложите все силы к тому, чтобы компьютер распознал ваши ответы сразу и безошибочно, чтобы верификатору не пришлось разгадывать ваши письмена, как берестяные грамоты древних новгородцев. Незамеченные верификатором ошибки, которые возникают на этапе сканирования, относят к техническим ошибкам. От этого, правда, никому легче не становится. Иногда техническая ошибка закрадывается в номер варианта. Это совсем худо. Написал человек номер своего варианта 325, а сканер прочел 925. И весь вариант проверяется неправильно. (И.Р. Высоцкий).

После окончания экзамена все бланки ответов, аккуратно рассортированные по отдельным стопкам, передают в региональный центр обработки информации (РЦОИ). Затем начинается проверка ЕГЭ, проходящая в три этапа:
— обработка бланков специальной аппаратно-программной системой. Их сканирование определено очень умной машиной, апелляция ее решений невозможна;
— проверка бланка с развернутыми ответами группой экспертов;
— финальная проверка уже в федеральном центре тестирования, установка первичных и тестовых баллов для каждого участника и определение минимального балла для ЕГЭ по проверяемому предмету.

Каждый из этих этапов — весьма трудоемкий процесс, в который вовлечено большое количество людей. В среднем результаты ЕГЭ публикуются на портале через 8-12 дней после экзамена.

Первый этап

Первую часть проверяет компьютер: отсканированные работы обрабатываются специальной программой, заносящей информацию в базу данных. Правда, на этом проверка первой части не заканчивается. Чтобы избежать ошибок, связанных с неправильным распознаванием программой ответа в бланке (причиной может стать непонятный почерк, неяркие чернила или ошибки в информационном блоке), ответы из базы данных сверяются со сканами работ группой верификаторов.

Верификатором может стать любой, кто откликнется на объявление РЦОИ и пройдет обучение и тестирование.

По окончании тестирования организаторы определят количество рабочих смен, и после пробной двухчасовой смены вы получите звание верификатора, именной пропуск и узнаете часы работы.

— Мы все сидели в большом кабинете с компьютерами, вход в который возможен только через кабинет регистрации и строго по пропуску, там ты получаешь именную флешку и входишь в свой профиль Windows, открываешь программу (доступ к которой возможен только после всех предыдущих операций) и начинаешь работать, — рассказывает о своей работе Алиса Максимова. — Разговаривать между собой нельзя, слушать музыку нельзя, есть нельзя, в телефоне сидеть тоже — повсюду камеры, за всеми следят, но, конечно, есть те, кто это нарушает…

Всего проверка проходит в три смены с 9:00 до 16:00, с 16:00 до 00:00 и с 00:00 до 08:00. В конце июля отработанные часы суммируются и выплачивается зарплата из расчета 186 рублей в час. В течение смены предусмотрен перерыв на прием пищи, у курящих есть время на перекур. Работающим в вечернюю и ночную смены обеспечивают трансфер.

— Каждый бланк — это всегда что-то необычное, бывают такие, что ты просто удивляешься, как красиво написано, даже сам хотел бы так писать, а есть другие, где не прочитать ни буквы: шестерка это, или буква «б», или цифра «5» — непонятно. А иногда напишут слово с дурацкой орфографической ошибкой, очень хочется исправить, но нельзя, — объясняет верификатор Дмитрий Кича.

Основная задача верификаторов — проверить верность информационного блока (там, где указывается ФИО, серия и номер паспорта). В данной части бланка самой распространенной ошибкой считается написание «е» и «ё», поэтому Алены/Алёны и Артемы/Артёмы находятся в группе риска (будьте внимательны и заполняйте все четко по паспорту). Если у верификатора возникают какие-то проблемы (несоответствия с базой данных, например), он обращается к старшему верификатору.

Второй и третий этапы

В первые годы сдачи ЕГЭ (2005—2006) из-за маленького количества экспертов в последний день проверки оставались до 2-3 ночи. Сейчас же обычная смена составляет десять часов — с 9 до 19.

Работы проверяют два эксперта в разных аудиториях, а сейчас, возможно, еще и в разных городах, так как идет перекрестная проверка — часть работ одной области смотрит другая. Если выявляется несовпадение по баллам, то работу проверяет третий эксперт. Но процент несовпадений выставления баллов очень мал. На апелляции экзаменационную работу рассматривает комиссия. Поэтому миф о том, что за каждый поднятый балл на апелляции проверяющий выплачивает штраф — это только миф, ведь скан бланка проходит через минимум троих человек, а на апелляции бланк проверяют и исправляют совершенно другие люди.

Быть экспертом ЕГЭ сложно. Прежде всего, устают глаза за 9-10 часов напряженной работы. К тому же проверка экзаменационных работ — большая ответственность, ведь за каждой — судьба ребенка.

После проверки всех частей экзамена РЦОИ отправляет информацию в федеральный центр тестирования, где происходит перепроверка всех бланков. После этого результаты утверждает Государственная экзаменационная комиссия и они публикуются на портале ЕГЭ.

Вот так проходит проверка страшного и важного единого государственного экзамена. Если вы его уже сдали, то поздравляем, теперь можете смело выдохнуть с облегчением, а если сдача ЕГЭ только предстоит, помните, что это лишь одно из жизненных испытаний, которое вам предстоит пройти. Будьте уверены: каждому, кто учился в школе, по силам сдать этот экзамен.

Как происходит утечка заданий ЕГЭ в Интернет, где и как проверяют работы и сколько можно заработать на ЕГЭ? – «Городу 812» рассказал эксперт ЕГЭ по математике Яков Моисеевич.

– ЕГЭ в этом году отличался от предыдущих?

– Пожалуй, в этом году пришлось читать больше бреда в работах по математике. Очень много было ответов, в которых очевидно школьники писали, сами не понимая что. Как если бы они писали на китайском. Им кажется, что они справились с заданием, но на самом деле  где-то забыли буковку, где-то не дописали черточку – и получилась чушь полная! В основном такое встречалось в работах тех, кто накануне экзамена увидел информацию об утечке вариантов в Интернете, посмотрел решения и попытался их выучить. Но – увы-ах! – не доучил.

– Утечки заданий ЕГЭ действительно были? Рособрнадзор уверял, что не было.

– А что другое мог сказать Рособрнадзор?

– Утечки повлияли на результаты экзамена?

– Не думаю, что сильно повлияли.  Может быть, процентов десять было таких работ,  в которых дети писали явно заранее заученные решения. Но им это не очень помогло, так как если ты не понимаешь задачу,  этого не скроешь. Нам же это добавило хлопот при проверке.

– Откуда идут утечки?

– Варианты заданий формируются в несколько этапов, и на любом из них могла произойти утечка. Несколько лет назад, например, просто забыли флешку с заданиями в компьютере. В этом году говорят, что типы заданий, которые будут на ЕГЭ, появились в Интернете чуть ли не за неделю до тестирования. Учитель математики одной из петербургских школ на своей странице в соцсети вечером накануне экзамена  разместил эту информацию. Многие успели посмотреть. Был скандал. Он еще не закончился.

– Зачем учитель это сделал?

– Он сам – эксперт ЕГЭ, создатель сайта «Решу ЕГЭ». Его сайт популярный, а учитель – безусловно, профессионал. Одно занятие по подготовке к ЕГЭ у него стоит несколько тысяч рублей. Я не знаю, зачем. Возможно, он сделал это ради пиара?  Петербургское сообщество экспертов ЕГЭ – это такое недоброе место… С одной стороны, там все очень вольнолюбивые, каждый при своем мнении, а с другой – все всего боятся. Этот учитель думает, что он герой и ничего плохого с ним случиться не может. Но куда его приведет эта история? Как это повлияет на его рейтинг?

– Что за рейтинг?

– У каждого эксперта ЕГЭ есть собственный рейтинг, но никто не знает, какой, – даже он сам. И я свой рейтинг не знаю. Это закрытая информация. Думаю, он формируется по результатам нашего труда. Каждую работу школьника проверяют одновременно два эксперта  – независимо друг от друга. В их оценках не должно быть расхождения. Но если есть расхождение в один балл, то этот балл просто дарится ученику.  А если разница в оценке больше, тогда работа отправляется на третью проверку. Соответственно, тот эксперт, который ошибся, опускается в рейтинге. Как мне объясняли: если тебя позвали экспертом на следующий год, значит, с рейтингом у тебя все в порядке.

– Сколько экспертов ЕГЭ в Петербурге?

– Предполагается, что должно соблюдаться соотношение: один эксперт – на сто работ. Поэтому по математике – порядка 350 экспертов, по русскому, думаю, чуть больше – где-то четыреста. По всем остальным предметам экспертов заметно меньше.

– Вам устанавливают норму, сколько работ нужно проверить?

– Каждый год  устанавливают новую норму. В этом году было восемьдесят работ на одного эксперта.  В прошлом – по-моему,  шестьдесят. В этом году я лично проверил более ста работ.

– Почему так много?

– У нас рабочий день длится с 10 до 18 часов. По правилам, даже если я норму выполнил, домой  уйти не могу. Я должен тупо отсидеть все восемь часов. Сидеть, ничего не делая, я не могу. Вот столько работ и успел проверить.

– Где работы проверяются?

– Есть четыре школы, расположенные в районе Сенной площади, в шаговой доступности от ЦОКОиИТ (Центр оценки качества образования и информационных технологий. – Ред.). В этих школах размещают всех экспертов по всем предметам. В день экзамена я должен зайти по своему логину на сайт – там написано, куда приехать. При входе в школу получаешь папку с указанием конкретной аудитории и номера стола. При входе в аудиторию предъявляешь паспорт, у тебя отбирают мобильный, ты подписываешь бумагу, что все средства связи сдал. Идешь на свое место, потом приносят работы. На столе ничего не должно лежать, кроме ручки, потому что мы сидим под камерами. Нельзя ничего оттуда выносить, нельзя фотографировать.

– Сколько платят экспертам ЕГЭ?

– Есть два вида экспертов: школьные учителя и вузовские преподаватели. Вузовским  платят по 40 рублей за каждую проверенную работу. А школьным ничего не платят, поэтому они сидят в носу ковыряют, после того как проверят свою норму.

– Почему школьным не платят?

– Считается, что эта работа входит в их нагрузку. У них же балльная система: за каждое свое действие – выступление на конференции, проведенное мероприятие и т.п. – учителя получают баллы, из которых складывается их рейтинг. Быть экспертом ЕГЭ – с одной стороны, почетно, а с другой – еще и «балльно». За счет этих баллов и рейтинга формируется их зарплата. В Петербурге вузовских экспертов намного меньше, чем школьных, – примерно каждый седьмой, то есть – где-то 50 человек всего.

– В этом году ЕГЭ по математике написали лучше, чем в прошлом ?

– Я бы не сказал. На мой взгляд, набрать больше 80 баллов в прошлом году было проще.

– В Петербурге есть несколько дважды стобалльников – выпускников, получивших сто баллов сразу по двум предметам. Это трудно  – написать математику на 100 баллов?

– Очень трудно. Для этого, на мой взгляд,  надо иметь талант. От учителя, безусловно, тоже многое зависит. Но дети, которые получают больше 80 баллов, – несомненно, талантливые. Наверное, на 70–72 балла по математике можно надрессировать и обычного ребенка. Чтобы получить хороший результат, важно постараться  чисто написать первую часть теста – она легче второй. И если она решена правильно, то, считай, 68 баллов – уже в кармане. Итоги ЕГЭ очень сильно зависят от психики и настроя ребенка. Если его на экзамене колбасит, он в обморок падает – естественно, он напишет хуже, чем тот, кто даже меньше знает, но спокоен.

Елена Роткевич

P.S. По просьбе героя интервью его ФИО изменены.

Система ЕГЭ не оправдала себя: школьники не получают знания, а лишь стремятся к высоким баллам. Так считает заместитель председателя комитета Госдумы по образованию и науке Максим Зайцев. Об этом он рассказал порталу URA.RU. Депутат подметил: дети с первого класса готовятся к ЕГЭ и боятся его. По мнения Зайцева, и администрация вузов, и люди предпочтут старый формат вступительных испытаний, проводимых в университетах. Однако это не единственные недостатки системы: оказывается, результаты экзаменов все еще можно купить.

Утром деньги, днем — баллы

Для получения «сотки» необязательно весь год готовиться и стараться. Можно купить баллы, причем в своей же школе. Свидетели говорят, что нужно обратиться к директору и обсудить стоимость ЕГЭ. За один экзамен придется заплатить около 100.000 рублей. Обычно баллы покупают в середине учебного года, чтобы администрация успела подготовиться к списыванию. Дальше директор связывается с коллегой из школы, в которой «покупателю» предстоит сдавать ЕГЭ, чтобы в день экзамена ему помогли. 

Операция «Э»

Покупателей в пункте проведения экзамена ждет учитель из их школы: он поможет получить высокий балл. Обычно педагог работает общественным наблюдателем в коридоре. 

— Я пришел на экзамен по химии и увидел свою учительницу по биологии, она сразу надела маску и опустила взгляд. Позже преподавательница сопровождала девочку из моей школы в туалет, но они свернули в другую сторону — это показалось мне странным. В итоге эта девочка получила 97 баллов и позже призналась, что ей помогли. 

Максим, г. Ростов-на-Дону (имя изменено)

Похожие истории нам рассказали выпускники из разных регионов. Оказалось, что так списывают и на экзаменах по химии, биологии, английскому и обществознанию.

— Я понимала, что на ЕГЭ можно списать, но не думала, что в этом кто-то поможет. За день до экзамена по английскому я узнала, что одноклассница получила 100 по литературе. Это меня удивило, потому что она не знала жанры многих произведений и не учила цитаты. Позже она сказала, что ее «поощряли», тогда я не поняла, о чем речь. На ЕГЭ по английскому она вышла в туалет и пошла в противоположную сторону. Спустя две недели оказалось, что у нее 96.

Диана, г. Москва (имя изменено)

Есть и другая «схема» получения высокого балла. На экзаменах по гуманитарным предметам не говорят, как, например, писать сочинение, но план могут передать. Такое и случилось на ЕГЭ по литературе.

— Я увидел свою учительницу в коридоре, она стояла возле двери в аудиторию и смотрела на мальчика из параллельного класса за последней партой. К середине экзамена у меня закончились черновики, и я поднял руку, чтобы мне принесли новые. Спустя какое-то время руку поднял и «покупатель». Тогда моя учительница передала несколько листов мальчику из параллели в дальний угол аудитории и только потом подошла ко мне. Это было странно, но я не подумал, что парень купил экзамен. Когда же результаты пришли в школу, на стене висели баллы всех учеников, а результат этого мальчика был заклеен. Тогда пазл и сложился. 

Александр, г. Ростов-на-Дону (имя изменено)

Мы опросили 100 старшеклассников и выяснили, что 35% ребят купили бы ЕГЭ, если бы была возможность. Статистика и истории подтверждают: основная цель экзамена, искоренение коррупции, не достигнута. 

Результат дороже денег

Обычно «покупатели» скрывают свои результаты, а администрация школы помогает им в этом. В четырех из пяти историй списки баллов либо закрывались, либо не вывешивались вовсе. Некоторые «покупатели» рассказывают об успехе друзьям, но обычно школа делает все, чтобы никто не узнал о взятках.

— Мой одноклассник, назовем его Виктор, в день получения результатов вышел из беседы класса и перестал отвечать на сообщения. Я подумал, что это из-за низкого балла, ведь он писал пробники плохо, а предмет и вовсе не знал. Спустя несколько часов Виктор сказал, что еще не знает свой результат, а личный кабинет у него не работает. Я предложил посмотреть балл в боте в телеграмме, но одноклассник снова перестал отвечать и вышел из сети. Классная руководительница сказала, что у него 97 баллов. Позже об этом заговорила вся школа, и Виктор перестал ходить на репетиции выпускного. 

Ян, г. Калуга (имя изменено)

Редакция не утверждает, что экзамен так просто купить. Материал основан на рассказах конкретных школьников. Верить им или нет — ваш выбор. Все случаи из разных регионов похожи друг на друга, а результаты экзаменов скрывали все участники историй. Получается, коррупцию ЕГЭ не искоренил, но менять систему никто не спешит. На проект каждый год тратят миллиард рублей, а рынок экзаменационных услуг оценивают в 20 миллиардов. «Мне кажется, что в ближайшее время это [отмена ЕГЭ] не произойдет хотя бы потому, что огромные деньги потрачены на этот экзамен», — считает доцент Высшей школы экономики Евгения Абелюк. 

ВЦИОМ же выяснил: 77% респондентов заметили ухудшение качества знаний школьников после введения ЕГЭ. Получается, несмотря на огромные минусы системы, она сохранится еще на долгое время, а на коррупцию и отношение людей к экзамену никто не обратит внимания.

ЕГЭ изнутри (глазами админа)

Злободневная тема, много топиков и на хабре (вот и вот)
Совершенно не собираюсь останавливаться на законности эксперимента, содержании КИМ (контрольно измерительных материалов) и прочем. Постараюсь сконцентрироваться непосредственно на технологическом аспекте подготовки и проведения экзамена.
Почему мне можно верить – опыт работы 2004-2007 в РЦОИ Московской области (системное администрирование, сбор данных, координация с разработчиками и регионами, проведение обучений, консультации и прочее). Все это время мы работали по технологии КРОК (см. ниже), в 2009 года технология изменилась в приказном порядке на ЦТ. Итак, по порядку

Технологии

До недавнего времени были две технологии организации и проведения ЕГЭ: Федеральный Центр Тестирования (далее ЦТ, www.rustest.ru) и КРОК (ЗАО КРОК www.croc.ru, далее просто КРОК).
Технологии различаются принципиально. Я максимально подробно остановлюсь на технологии КРОК и в конце укажу моменты, почему это было лучше, нежели ЦТ (личное профессиональное мнение мое, коллег и руководства).
КРОК – MS SQL 2000 в качестве сервера баз данных и WIN 2000 (2003) в качестве сервера приложений. Сервера разнесены по разным машинам, на WIN 2000 стоял дополнительно AD для внутренней локальной сети.
На сервере приложений стоит серверная часть программного комплекса (далее АИС), на клиентских машинах соответственно клиентская часть, пользователь логинится через AD в домен, работа через интерфейс браузера (обязательно IE6). По правилам безопасности никакое другое ПО на клиента ставить нельзя (я ставил еще офис, rar и radmin – запароленные и только для группы администраторов). Весь софт 100% лицензионный (винды, офисы, серверные программы и подобное).
В качестве дополнения по комментариям по объемам на дисках: 7 гигов несжатый дамп базы (полный) и 90 гигов архив картинок всех экзаменов. Общее количество человекоэкзаменов около 120 000

Вся локальная сеть с базой данных и любыми данными экзамена ФИЗИЧЕСКИ отсоединены от сети интернет (во избежание утечки данных).

На уровне АИС существует распределение прав пользователей по доступу к системе (настраивается очень гибко, чекбоксами отмечаются нужные привилегии для группы пользователей). Соответственно на любую клиентскую станцию можно авторизоваться через AD с нужными правами и работать как требуется.

Структура сети для проведения экзамена на 50 000 человек (у нас это была максимальная нагрузка, данные необходимо обработать и передать на проверку максимум на 4-й день после экзамена) в итоге состояла из:
1 – 3 сервера (баз данных, сервер АИС, файловый архив отсканированных картинок)
2 — 12-17 станций сканирования
3 – 20-25 станций верификации
2 – 1-2 станции администратора для постоянного мониторинга узких мест.

Все остальное время года клиенские станции сканированияверификации работают в штатном режиме у других пользователей. На время экзаменов накатывался образ с готовой системой и изымаются в наше пользование.
Станции сканирования — высокоскоростные сканеры ДС-300 производства ЛОМО, PANASONIC типа KV-S3105C и маломощные Fujitsu. ДС работали через сеть, KV и Fujitsu через скайзи. Скорость работы первых двух машин впечатляет (по первости) – 90-120 листов в минуту в черно-белом формате порядка 200 dpi. При сканировании бланк режется на кусочки (по реперным меткам), моментально проходит распознавание и файлы перемещаются на файловый сервер. Весь софт – разработка КРОК (в их субподряды не вмешивался).

Сбор данных.

Подготовка к экзаменам начинается с октября (примерно) и продолжается весь год. Включает в себя следующие этапы:
1 – выверка сведений по образовательным учреждением, административных справочников, уточнение ответственных за проведение экзаменов (обычно один человек от района Московской области, но если район большой иили человек мало подкован к компьютерах – двое, один технарь, один управленец). Муниципальные координаторы – вообще отдельная тема, им бы памятник поставить. Обычно это женщины из органов управления образованиям.

2 – сбор данных по выпускникам ОУ (максимально полная карта, ФИО, паспорт, планируемые для сдачи экзамены). Сбор осуществляется специализированным клиентским ПО (программа без инсталляции) с весьма наглядным интерфейсом. Возможности ПО значительно шире – помимо базового сбора данных это и сбор аналитических данных для стат. Анализа. К примеру – данные по учителю (стаж, специализация, дата курсов), годовые оценки по предмету, учебник и много другого. Эти данные заполняются в течении всего года (ибо очень большой объем информации необходимо собрать и внести).

3 – выверка паспортных данных выпускников (на бумажных носителях за подписью руководителя ОУ)

4 – с публикации точных дат экзаменов окончательный сбор данных по регистрации на экзамены и последующая выверка (на бумажных носителях за подписью руководителя ОУ и подписью ученика рядом с собственными паспортными данными и выбранными экзаменами). Срок этого этапа очень сжат, потому что от приказа с датами экзаменов и крайним сроком подачи данных в вышестоящие органы крайне мало времени. Зачем так строго – для печати необходимого количества КИМ

С выверками вообще очень интересные вещи творились. Ученики на протяжении всего года должны были минимум 2-3 раза видеть списки с своими данными и по необходимости исправлять (фио, паспорта). Мало того, что каждая выверка приносила порядка 5-10% изменений в БД (это все вносится руками операторами центра), так и на экзаменах выходило множество форм с коррекцией. Дети совершенно невнимательно относятся к своим данным, а ведь из-за этого и у них могут быть проблемы с получением результатов (коррекция данных проходит через ФЦТ и это очень долго и сложно для нас).

Итак, все данные собраны, выверены, переходим к экзамену.

Проведение экзамена

За несколько дней до экзамена из ФЦТ получаем заказанное количество КИМ (с некоторым лимитом на случай брака либо недокомплекта аудитории). Все очень серьезно – запечатано, принимается по описи руководителем центра.

Печать материалов на экзамен
В центре печатаются комплекты для каждой аудитории и ППЭ (пункта проведения экзамена). Печатали на HP в диком потоковом режиме, с второго года наловчились одновременно печатать с двух клиентов на два принтера сразу. Распечатанный комплект вынимается из принтера, подписывается ведомость и запечатывается в так называемый секьюрпак. После пачки комплектуются для каждого районаППЭ и складируются в специальном помещении (с кодовым замком). Картриджи меняются каждые 3-4 часа, пыль столбом, легкие медленно умирают от 3-4х одновременно работающих HP-шников.

За сутки до экзамена приезжают муниципальные координаторы – по описи происходит выдача пакетов, сверка количества и общих данных. Часов в 18-19 последний пакет выдан, по коньячку и спать, ибо следующие 3-4 дня как страшный сон.

День экзамена

С 8 утра (время вскрытия пакетов на местах) в центре находились мы с начальником – ответы на все возможные вопросы в течении экзамена и нервное ожидание брака в КИМ (было и такое, на стадии печати брак, приходится ребенку оформлять смену варианта), ошибок при регистрации детей на экзамен (несколько раз муниципальные координаторы забывали внести ученика на экзамен, а он спокойно не расписывался на ведомостях выверки). Некоторое затишье после 10 утра (экзамен пошел).

Примерно с 14 дня начинается привоз материалов из ППЭ. Приемка происходит следующим образом:
1 – сверка пакетов начальником центра

Прием и сканирование после экзамена
2 – муниципальный координатор и оператор станции сканирования «уединяются» в зале и попакетно сканируют, после обработки каждого пакета аудитории сверяются данные (машинной обработки) с ведомостями, ни один бланк не должен быть утерян. На этом этапе несколько раз встречались случаи, что в ППЭ забыли бланк. В таком случае прием данного района приостанавливается до выяснения. На уровне клиентской машины ведется строгий подсчет количества бланков выданных и отсканированных по каждой аудитории. Подмена невозможна. Бланки именные и с уникальным кодом, при сканировании идет сверка всех полей.

Был курьезный случай, когда в ППЭ ученик вышел в туалет с нерешенной частью С и смыл бланк в унитаз (хорошо не спустил воду). При приемке обнаружили, отправили гонца в пункт, тот в туалете выловил бланк и зажав нос привез нам, пришлось так и обрабатывать.

3 – я как администратор, в промежутках между решением текущих вопросов, проверяю обработанные аудитории, если количество выданныхпринятых бланков сошлось – перевожу аудиторию на проверку.

Документы с большого района, Одинцовский район (коллеги напомнили), ждут очереди на сканирование, в этой пачке бланки 2500 участников
4 — после этого бланки с работами проходят верификацию. Верификация дело тонкое – каждая клиентская машина с базой верификации самообучаема. Если оператор 2 раза подтвердит значение одного поля – оно попадает в словарик и с вероятностью 99% будет автоматически отработано. Занятие весьма нудное, потому заканчивается обычно много позже сканирования (2-6 часов ночи). Вот на этом этапе и происходит обработка «случайных» ошибок. Если ребенок поставил в части А ответ в 5-ю клетку (она зарезерервирована), заполнены лишниеслужебные поля – все это попадает верификатору.

5 – администратор – ведет общий мониторинг работы системы, исправляет любые ошибки по ведомостям и прочее. Отслеживаются случаи простановки метки «ученик не явился» и заполнненного бланка (система показывает подобные случаи), иначе работа не будет засчитана. Потерянные бланки – система не смогла распознать отсканированный номер и не прикрепила бланк к аудитории.

6 – после окончания верификации можно распечатывать пакеты для работы экспертов. Они приступают с 10 утра следующего дня экзамена. Потому часов с 8-9 вечера запускаются минимум 2 станции печати работ С. Выдача строго случайна – бланки неименные, эксперт не знает кого он проверяет, каждая работа отдается двум экспертам, если расхождении в их оценках выше заданной отметки – работа показывается как требующая дополнительной проверки и распечатывается для «третьего эксперта». Третий эксперт не может быть из числа двух уже проверявших, назначается вручную с указания председателя комиссии проверки.

Проверка части С длится 3-4 дня. Как только все данные обработаны и ни один бланк не потерян – формируется CSV с результатами. Данный файл шифруется на сервере (Crypto Pro, ключи хранятся на отдельном носителе в сейфе и выдаются под роспись) и по зашифрованному каналу через специальную программу отправляются в ФЦТ на оценку.

Про шкалирование рассказывать не буду, кому интересно найдут выкладки. Достаточно сложная математическая модель, строится в ФЦТ при получении результатов с всей России.

Через 3-5 дней обработанные результаты с оценками приходят из ФЦТ в CSV, загружаются в БД и распечатываются протоколы (каждый за подписью печатью министра образования области) и выдаются в каждый район. Последние годы стали разрешать публикацию данных через сайты, в этом году мы на нашем сайте Мособласти сделали такой же функционал (чем вызвали рост посещаемости и положили сервер хостера )).
В принципе в общих чертах все. В режиме реального времени, когда экзамены проходят с промежутком 3-5 дней иили 2-3 экзамена в один день, это выливается в 2-3 недели 100% присутствия на работе без выходных по 25 часов в сутки. Но когда знаешь, что за нашими спинами 50000 нормально сдавших экзамен детей и довольные родители — того стоит.

Апелляции

Апелляций по проведению экзамена я не припомню (хотя иногда и стоило бы, но дети уставшие и не сразу понимают ситуацию). По результатам – порядка 500 штук на 50 000.

Для апелляции собирается специальная комиссия, распечатываются распознанные бланки, копии оригиналов, происходит сверка на предмет машинной ошибки распознавания и эксперты по предметы с ребенком и родителем пошагово проходят по всем заданиям. Апелляции делятся на категории: отклоненные и рассмотренные. 99% рассмотренных апелляций проходит с повышением балла (редко когда оправданно, обычно цветы, конфеты, слезы). Пару раз особо «наглым» понижали балл. Порядка 40% остаются при том же результате, то есть апелляция отклоняется. Отдельно хочется сказать отличникам – если вам в вуз не хватает 1-2 балла – обязательно подавайте апелляцию, такие случаи (их немного) всегда положительно рассматриваются.

Узкие места всей процедуры:

1 – банальная невнимательность на уровне районов и школ. Координаторы теряютзабывают детей, дети не обращают внимание на свои паспортные данные и выбранные даты экзаменов. Создает множество проблем нам при выверке данных и детям в случае осложнений.

2 – низкая компьютерная грамотность координаторов. Ни в коем случае не хочу их винить, но факт остается фактом. Не в каждом районе могут найти специалиста для решения технических вопросов (обычно заключаются в работе с электронной почтой, excel, word, ПО для сбора информации). Оттуда и мой анекдот про «красненький и синенький интернет».

3 – отсутствие интернета в органах управления образованием. Многие работают через модем, с домашних компьютеров отправляют нам данные. Про школы просто молчу – редко редко есть сеть, обмен данных через дискеты обычно (!!!!)

4 – полный хаос в взаимоотношениях с ФЦТ. Пара примеров. Они пишут и утверждают с представителями КРОК и министерства формат базы данных. По факту мы обнаруживаем расхождение – утвердили одно, выгрузили данные в CSV, а в базу ФЦТ они не загружаются – очередность полей изменилась, формат данных и прочее. Идет ругань, крок судорожно пишет хак для своей базы, чтобы подогнать якобы утвержденный формат по новые требования (никем нигде не высказанные). Далее – выдача результатов, по како-либо причине наш файл ими не принимается (формат ошибочный либо другое) – тишина полная с их стороны, только по звонку (а дозвониться к ним ох как сложно) оказывается что имеет место косяк. Опять же это время, нервы нас и детейродителей. При общении создается впечатление классического «совкового» магазина из анекдотов. Очень, очень напрягает такие факты, вроде бы общее дело делаем, а тут такие подлянки.

5 – еще больший хаос на более высоком уровне. Несоответствие приказов действительности, одно постановление противоречит другому и подобное. Вечная слава нашему шефу, что не жалея седин утрясал такие вопросы максимально оперативно (хоть совершенно не наш уровень)

6 – и, пожалуй, самое главное – НЕВНИМАТЕЛЬНОСТЬ и НЕЗНАНИЕ правил при проведении экзамена в пункте. Мы круглый год проводим обучение специалистов каждого ППЭ, готовы постоянно ответить на любой вопрос. После оказывается, что они не знаю с какой стороны открыть пакет и оформить ведомость.

Положительные аспекты технологии

1 – очень и очень доброжелательный софт (не без грехов, но по сравнению с софтом ФЦТ – рай на земле). Спецы по внедрению отвечали почти на любой вопрос. Много собственных наработок (грешен, писал на php пару приблуд для быстроты однотипных процедур). Единый комплекс, гибкий и расширяемый, разработан одной конторой. Софт же ЦТ был собран из разных кусочков разных разработчиков, на базе ABBYY. В работе неинтуитивен, неудобен и на мой взгляд просто крив.

2 – удобство конечной конфигурации системы в центре, отлаженность технологии буквально до нитки. Когда центр перевели на ФЦТ – трудозатраты при проведении выросли в разы (как и уровень рисков)

3 – высокая безопасность данных. Из центра и из ППЭ в дни проведения ни единой капли информации потеряно не было. Кроме администратора никто физически не может внести изменения в БД, на уровне клиента все мониторится и сохраняется. Возможность сделать «бяку» есть только у админа. Пару раз правда приходили лично к мне с тихим предложением денег но безуспешно. Насколько мне известно — на уровне районов подобные случаи тоже не проходили.

4 – почти 100% удобство для конечного пользователя – ученика. Бланк именной, с указанием школы, ППЭ, только подпись ставить и решай задачи (у ЦФТ нужно еще и ФИО вписывать – лишний повод для ошибки)

5 – огромные возможности для проведение статистического анализа не только ЕГЭ но и всей образовательной системы. Массив данных это позволял (при условии 100% заполнения на местах). Нами использовался SQL Analyze Server с веб-компонентами (модуль аналитики — разработка того же КРОК). Ну и напрямую из базы запросами тягались особо интересные показатели. Сравнивать можно почти все что угодно – оценка от продолжительности изучения предмета в совокупности с учебником, соответствие оценки ЕГЭ и готовых показателей на кривой роста итогового балла с 5-го класс. Множество чудесных вещей, подобных данных не было нигде ранее. На практике же накрывалось медным тазом, хоть и для статистической работы был отдельный центр при министерстве.

Итоги (по опыту работы) – процент ошибок машинной обработки – 0,1 %, процент ошибок верификатора – 2 случая на 50 000 человекоэкзаменов. То есть с нашей стороны все чисто.

Повторюсь – все написанное – мое личное мнение по опыту работы на данной технологии и опыт солидарных коллег нашего центра в период работы до 2007 года. И простите за язык изложения — чукча не писатель, чукча читатель.

UPD информация от ведущего разработчика системы

1 — на чем написано: на C# (ASP.Net) — апп. серверная часть, T-SQL — клиентская часть, Active-X (С++, VB6, C#) + VBScript — клиент.
2 — как происходит выдача вариантов для аудитории: достаточно сложный алгоритм, который достаточно равномерно размазывает варианты КИМ по аудиториям ППЭ, стараясь не выдвать одинаковые варианты соседям по «крестику» (влево-вправо-вверх-вниз)

Если заинтересуют отдельные, нераскрытые, аспекты технологии – пишите, постараюсь дополнить. Ну а если нет аккаунта на хабре — пишите в комменты в блоге
Рабочее место админа ))