Экзамен с прокторингом что это

Все больше сфер жизнедеятельности переходит в онлайн, образование – не исключение. Спрос на дистанционное обучение неумолимо растет, а онлайн-экзамены обретают повсеместное распространение. Однако подавляющая часть учебных учреждений была вынуждена столкнуться с проблемами осуществления контроля вовлечения обучающихся в процесс. Отследить этот момент и исключить возможность списывания во время сдачи экзаменов в формате онлайн поможет прокторинг. Рассказываем подробно о том, что такое экзамен с прокторингом, а также о нюансах и преимуществах подобной системы.

Что такое прокторинг и почему с ним лучше

В связи с пандемией коронавируса, университеты были вынуждены перевести студентов на дистанционное обучение. Однако подобные меры открывают перед студентами множество способов облегчения тестирования. Надежное средство в решении проблемы контроля – система прокторинга, работа которой основана на технологиях искусственного интеллекта. С ее помощью удастся предотвратить списывание во время дистанционных экзаменов и решить ряд других задач, с которыми столкнулось большинство учебных заведений.

Онлайн-прокторинг – специальная система, предназначенная для автоматического обнаружения запрещенных действий во время сдачи экзамена. Система ставит соответствующую пометку при попытке открытия другой вкладки в браузере или использования шпаргалки. После чего эти сведения направляются экзаменатору.

Как можно использовать прокторинг

Чаще всего наблюдение за проведением дистанционного экзамена осуществляет проктор. В обязанности этого специально обученного специалиста входит отслеживание ошибок, которые могла допустить программа. Ее работа в равной мере эффективна как в случае с отдельными пользователями, так и многотысячной аудиторией. Для осуществления проверки потребуется лишь компьютер с выходом в интернет.

Прокторинг простыми словами – это процедура наблюдения за ходом экзамена. В зависимости от типа прокторинга он может применяться для различных видов испытаний. Можно классифицировать их следующим образом:

  • Синхронный прокторинг – применяется преимущественно во время проведения письменных экзаменов или тестирований. Наблюдение за их ходом осуществляет проктор, главной задачей которого является контроль прозрачности проведения экзамена, а также идентификация личности учащегося. Помимо этого, в его задачи входит комментирование действий студента, для чего используется специальный чат в интерфейсе программы. При несоблюдении правил он может прервать процесс тестирования.

  • Асинхронный прокторинг с постпроверкой – служит также для контроля за проведением письменного экзамена. Но выявление нарушений, осуществляет не человек, а программное обеспечение. Фиксация нарушений при этом не служит причиной для прекращения тестирования, и запись процесса отправляется сотруднику вуза для подтверждения факта нарушения процедуры. В обратном случае – экзамен признается сданным.

  • Автоматический мониторинг – для этой процедуры характерно отсутствие человека. Контроль действий студента и проверку осуществляет ИИ.

Помимо этого, система прокторинга применима и для устных экзаменов. В этом случае процесс будет напоминать традиционный способ проведения. Экзаменатор озвучивает вопрос и дает студенту несколько минут для подготовки ответа, по истечению которых тот озвучивает ответ в комнате с комиссией. Тем временем возможность подготовки ответа под наблюдением проктора переходит к следующему экзаменуемому.

Как работает прокторинг

Алгоритм работы заключается в нескольких шагах, которые следует выполнить до и во время экзамена. Итак, прежде чем приступать к тестированию студенту необходимо совершить несколько действий:

  • Предоставить системе доступ к микрофону и веб-камере компьютера.
  • Выполнить проверку стабильности интернет-соединения с помощью программы удаленного прокторинга.
  • Пройти проверку оборудования, в том числе на отсутствие подключения второго экрана, а также попытки стимуляции и имитации экрана.
  • При успешном прохождении вышеуказанных требований программа запросит предоставление фото экзаменуемого с удостоверяющим личность документом. Для этого подойдет паспорт, студенческий билет и водительское удостоверение.
  • Можно переходить к началу экзамена.

С началом тестирования система выполняет анализ поведения тестируемого. Наиболее часто в рамках работы систем онлайн-прокторинга осуществляется отслеживание ряда параметров:

  • изменение траектории взгляда;
  • установление человеческой речи и невербального общения;
  • выявление факта использования сторонних гаджетов;
  • обнаружение шпаргалок, учебников и т. д.;
  • выявление факта переключения вкладок браузера;
  • обнаружение использования широковещательного ПО.

Правила контроля могут корректироваться в случае разрешения использования бумаги и письменных принадлежностей, а также калькулятора внутри программы в ряде определенных ситуаций. По завершению экзамена система рассчитывает вероятность нарушений и предоставляет отчет по каждому из них с указанием отметки времени.

Ограничения и последствия онлайн-прокторинга

В силу ограниченных возможностей системы в некоторых случаях может потребоваться изменение процедуры проведения тестирования, а также усложнение технического оснащения. Внедрение дистанционного контроля также требует упрощать и удалять определенные задания тестирования. Это вызвано необходимостью сокращения времени на подготовку ответа. Более того, не все экзамены могут проводиться в онлайн-формате.

Кому нужен прокторинг

Наиболее востребована система прокторинга для образовательных учреждений, причем, не только для осуществления контроля письменных тестирований, но и для контроля соблюдения правил во время устных и прочих видов экзаменов.

Помимо этого, применение алгоритмов ИИ будет эффективно работать и в других областях. С его помощью сотрудникам будет проще проходить тестирование для повышения квалификации. Также актуально применение прокторинга при приеме на работу и во время презентации нового продукта для исследования уровня вовлеченности аудитории. Ознакомиться с видео-презентацией о работе системы можно, перейдя по ссылке

https://www.youtube.com/watch?v=4hYJCcdyl6o

Любопытно, что проблема имеет место в совершенно, казалось бы, не родственной деятельности, а именно — игре в шахматы. И там можно считать, ситуация уже подходит к своему логическому завершению: внедрение разных программ против читинга (или «читерства»), т.е. мошенничества, приводит к изменению классических шахмат.

Началось все в конце XX века: сначала компьютер победил чемпиона мира Гарри Каспарова в блиц, потом обыграл его в одной из партий матча в классические шахматы, и наконец, выиграл сам матч. Само по себе это было бы не страшно, но параллельно практически линейно снижалась стоимость владения шахматным помощником за счет общего развития ИТ.

С тех пор любой человек, который умеет ходить фигурами и записывать ходы, может обыграть очень сильного гроссмейстера, если у него в доступе будет компьютер с установленной программой.

Таким образом, компьютерные технологии предоставили новичкам новые возможности для читинга — пользования программами во время игры и обращения за советом к профессионалу или просто человеку, имеющему доступ к компьютерным сервисам.

В ответ начали появляться различные модификации классических шахмат. К примеру, шахматы Фишера-960, шахматы с выбранной случайной расстановкой фигур, которые не предоставляют игрокам возможности использовать заученные ходы в начальной части партии. В итоге было создано множество радикальных модификаций классических шахмат, которые фактически представляют собой уже новые игры с сохранением только внешнего вида и основных принципов (к примеру, гексагональные шахматы Глинского, шахматы Капабланки).

Самих же турниров по классическим шахматам проводится все меньше. Так, согласно статистике сайта «Результаты шахматных турниров» (РШТ), в марте 2020 года в России состоялись 175 шахматных турниров, из которых «классика» составила только 38 состязаний, остальное — рапид (в большей степени) и блиц.

В итоге статус-кво в шахматах сейчас таков.

  1. В штатном режиме развиваются шахматы «для души», когда участники не преследуют каких-либо финансовых или других выгод, а играют ради удовольствия.
  2. Продолжается интенсивный уход средних и сильных шахматистов в быстрые шахматы (рапид или блиц), когда помощь компьютера становится невозможной или неэффективной. В эту категорию попадает подавляющее большинство коммерческих турниров.
  3. Проводится ограниченное количество турниров со специальными античитинговыми мероприятиями.

Если применить «шахматные» выводы к образованию, то напрашивается почти полная аналогия. Реально применимы лишь четыре сценария использования онлайн-режима оценивания:

  • «для себя», когда испытуемый сам заинтересован в объективной оценке своих знаний и умений, а использование прокторинга лишено смысла (аналог любительских шахмат);
  • переход на быстрые тесты с неминуемо вытекающим отсюда кардинальным упрощением заданий (аналог рапида или блица);
  • проведение оценивания только в специально оборудованном центре, где уже теоретически возможно гарантировать честность, но сложнее избежать коррупционных рисков (аналог турниров высокого уровня). Говорить о массовости онлайн-тестирования здесь можно только с большой долей условности;
  • наконец, в образовании есть еще один сценарий, отсутствующий в шахматах, а именно — использование независимой онлайн-оценки в нишевом сегменте трудоустройства, когда сам по себе подтверждающий документ не является исчерпывающим доказательством владения компетенцией. В данном случае обманывать отчасти бессмысленно, поскольку все равно придется доказывать неслучайность успешного прохождения теста.

Но ставить вопрос о качестве прокторинга в целом преждевременно, так как процесс оценки в онлайн-режиме меняет в принципе подход к оценке и к ее процедурам. К тому же в связи с переходом на дистанционный формат обучения многие студенты находятся в состоянии стресса и беспокойства, и дополнительный контроль может только навредить.

Прокторинговые системы особенно эффективны в рамках корпоративного обучения, когда нужно охватить большое число экзаменуемых, находящихся, например, в разных уголках страны и мира, или же когда крупной компании необходимо провести оценку большого числа своих сотрудников.

Таким образом, возможности применения онлайн-оценивания действительно ограничены, и можно предполагать, что в самое ближайшее время статус-кво онлайн-тестирования будет сильно изменен.

Прокторинг - что это

Что такое прокторинг и чем полезен на экзаменах, тестировании и в обучении

Вспомните письменный экзамен в университете. В аудитории тишина, преподаватель следит за каждым движением и любая замеченная шпаргалка — означает пересдачу. Такая система оценивания знаний действует до сих пор и далеко не идеальна. Но сдать экзамен как-то иначе было невозможно — пока не появилось онлайн-обучение.

С развитием e-learning лекционные занятия перешли в компьютеры и смартфоны, общение с преподавателями — в чаты. А экзамены начали сдавать в режиме онлайн с прокторингом: проще, объективнее и без лишних разъездов. Например, наши партнеры компания Examus создали технологию, которая помогает анализировать поведение и эмоции пользователей любых онлайн-сервисов с мобильных устройств и компьютеров, даже при слабых каналах связи. Что же такое прокторинг, для чего он нужен и как его пройти с первого раза, не искушая судьбу и проверяющих — читайте в нашем материале.

Что такое прокторинг

Прокторинг — это процедура контроля на онлайн-экзамене или тестировании, где за всем процессом наблюдает администратор — проктор. Он следит за действиями экзаменуемого с помощью веб-камеры и видит, что происходит на мониторе его компьютера.

Такая технология позволяет подтвердить личность кандидата, объективно оценить его знания, исключить шпаргалки и прочие уловки на экзамене. При этом испытуемый и проктор могут находиться в разных уголках планеты.

Впервые прокторинг стали использовать в Америке в 2008 году. Компания ProctorU, которая и создала эту систему, использовала прокторинг для дистанционного контроля за экзаменом. Тогда за студентами следил администратор через веб-камеру и самостоятельно фиксировал все нарушения.

С тех пор технологии ушли вперед, многое автоматизировали и прокторинг стали проводить 3-мя способами:

  • проктор-человек — администратор следит за ходом экзамена через веб-камеру и фиксирует нарушения вручную;
  • автопрокторинг — программа самостоятельно верифицирует личность студента, следит за его поведением, направлением взгляда, анализирует звуки в комнате, фиксирует нарушения на видео и готовит отчеты;
  • человек и программа — комбинированный вариант. Может проводиться 2-мя способами. Первый — когда весь процесс контролирует ПО и подает сигналы проктору в случае нарушений. Второй — администратор сам следит за тестируемыми в режиме онлайн. Последний вариант считается самым надежным, так как любая программа может дать сбой. При этом проктор, за счет автоматизации процесса, может одновременно принимать экзамен у нескольких студентов и ничего не упустить из виду.

тестирование с прокторингом

Так проходит тестирование с прокторингом на digital-платформе Finassessment

Прокторинг исключает любую заинтересованность учебного центра в результате экзаменов. Так как проктор — это не экзаменатор, а независимое лицо. Он не участвует в учебном процессе, но принимает экзамен и следит, чтобы он прошел по всем правилам. Проктором может быть как специально обученный специалист, так и независимый преподаватель из другой учебной организации или частной компании.

Как все проходит и что нельзя делать во время прокторинга

Онлайн-экзамен или тест с прокторингом можно пройти где угодно. Главное, чтобы в помещении был хороший интернет, под рукой — исправный компьютер и веб-камера. Также придется установить на ПК специальную программу для записи с экрана и соблюдать простые правила и процедуры.

Чтобы пройти экзамен с прокторингом, студенту нужно:

  • за 15-20 минут до начала экзамена включить компьютер, чтобы зарегистрироваться в системе
  • после пройти тест оборудования и проверить, пропускает ли компьютер экзамен (на офисных ПК могут быть закрыты порты)
  • включить видеотрансляцию и разрешить системе вести запись с экрана компьютера
  • пройти верификацию личности, показав документы на веб-камеру (паспорт или водительские права подойдут)
  • при необходимости показать рабочий стол и комнату и, если все будет в порядке, проктор запустит экзамен.

Во время экзамена можно пользоваться рукописными конспектами с курса и звонить проктору в случае технических неполадок (если отключили свет, пропал интернет).

При этом запрещено:

  • ходить по вкладкам в браузере
  • сидеть в наушниках
  • пользоваться подсказками 3-х лиц и шпаргалками
  • звонить по телефону и уходить без предупреждения

При любом нарушении проверяющий пишет замечание кандидату. А если грубых нарушений было несколько или студент не реагирует на предупреждения — проктор может прервать экзамен досрочно или вовсе его аннулировать.

Где используется прокторинг

Систему прокторинга применяют не только в онлайн-обучении, но и в аттестации и тестировании специалистов на предприятиях. За что особенно полюбился не только учебным центрам, но и бизнесу.

Вот основные 3 области его применения.

  1. Подбор персонала. С помощью тестов с прокторингом HR-менеджеры и руководители могут проверить профнавыки соискателей из других регионов и стран. Отобрать лучших и отсеять неподходящих кандидатов на должность, экономя собственное время и деньги компании.
  2. Онлайн-обучение. Особенно это актуально для компаний, которые обучают специалистов из разных филиалов. Сотрудники повышают квалификацию онлайн, а экзамен сдают с прокторингом. Так руководители и владельцы компаний дополнительно подстраховываются от фальсификации результатов экзаменов и могут быть уверены в эффективности своих вложений.
  3. Тестирование и аттестация персонала. Необходимость в прокторинге не всегда связана с обучением. Его также используют при тестировании hard skills сотрудников. Обычно такие тесты проводят перед кадровыми ротациями или когда принимаются решения о надбавках к зарплате. Зная это, сотрудники могут хитрить и пытаться улучшить результаты тестов. Прокторинг поможет объективно оценить знания работников и исключить любые попытки манипуляций.

Примеры использования прокторинга

Линейные сотрудники Сбербанка периодически проходят онлайн-курсы в корпоративном университете, а экзамены сдают дистанционно с прокторингом. По результатам такого обучения треть специалистов получают повышение или подключаются к новым проектам банка.

Поисковая система Яндекс также перешла на подобную практику. С июля 2019 года получить сертификат по Яндекс.Директу можно, только сдав экзамен с прокторингом. При этом нужно пройти дополнительную авторизацию в системе и выдержать часовой тест с автоматическим видеонаблюдением.

Наша академия использует систему прокторинга с 2014 года в нескольких сферах.

  • На онлайн-экзаменах (читайте, как это выглядит в Репортаже с экзамена IPFM). Применение прокторинга на экзаменах — обязательное требование профессиональной организации IPFM. Так британский Институт гарантирует высокий статус своих дипломов.
  • Во время профессионального тестирования финансовых специалистов на digital-платформе Finassessment. Такие тесты с прокторингом мы проводим по заказу компаний, когда нужно оценить уровень знаний сотрудников после корпоративного обучения или подобрать кандидатов на должность. При этом проктором на тесте может быть как представитель компании, так и специалист от digital-платформы.

Советы, как сдать экзамен с прокторингом

Если вам предстоит сдать экзамен с прокторингом — не волнуйтесь. Все пройдет гладко, если придерживаться простых советов.

  • Экзамен необходимо сдавать в отдельном, тихом помещении. Если вы дома — выберите комнату, куда не смогут зайти ваши родные и домашние животные. Присутствие котов и собак не запрещено, но питомцы могут сильно отвлекать.
  • В офисе экзамен лучше проходить в нерабочее время, когда рядом нет коллег. Иначе наличие людей и разговоров в комнате будет считаться грубым нарушением.
  • Чтобы не терять время на технические неполадки во время экзамена, заранее пройдите тест оборудования, проверьте исправность веб-камеры и микрофона.
  • Чтобы без проблем пройти верификацию личности, позаботьтесь о достаточном освещении комнаты. Проктор должен легко распознать ваше лицо на камеру и прочитать данные в паспорте.
  • Если вам нужно отойти в уборную — просто напишите об этом проктору в чат. Отлучаться можно не более, чем на 2-3 минуты.
  • Если неожиданно пропал свет, интернет, отключился компьютер или произошли другие технические форс-мажоры — позвоните проктору. Возможно, вам продлят время экзамена. Ну, или как минимум, не зачтут как нарушение.

Несмотря на то, что система прокторинга очень требовательная и бывают разные технические трудности — у нее есть ряд преимуществ. Прокторинг не даст пройти тест без реальных знаний или получить сертификат за другого или несуществующего специалиста. При этом система контроля существенно экономит время и финансовые ресурсы как специалистов, так и компаний.

Экзамен с прокторингом — это единственная альтернатива очного экзамена, которая сохраняет прозрачность и качество самой процедуры. И как показывает практика, количество нарушений на экзаменах с прокторингом намного меньше, чем на очных. Во-первых, это обусловлено незаинтересованностью прокторов в результатах экзамена. А во-вторых, сами студенты относятся к испытанию более ответственно и ведут себя спокойней, находясь в привычной обстановке.

Легкого вам прокторинга и высоких баллов на экзаменах!

Хотите посмотреть, как работает прокторинг и для чего еще, кроме экзаменов, его можно использовать в вашей компании?
Зарегистрируйтесь, чтобы попасть на бесплатную демонстрацию инструмента от Examus!

Как вы считаете, при каком формате экзамена достоверность результатов выше?

В этом году сдавать экзамены и зачеты всем придется онлайн. Как организовать процесс, как контролировать, чтобы не списывали, как ставить оценки и что такое прокторинг? Рассказываем, к чему быть готовым и как настроить процесс.

Опыт проведения онлайн-экзаменов в России и в мире уже есть. Многие годы это делается на массовых открытых онлайн-курсах. В рамках дистанционных программ вузы и цифровые платформы научились проводить экзамены и решать технологические вопросы, связанные с идентификацией личности учащихся, с выполнением требований экзамена. Эта технологическая часть уже решена.

Василий Третьяков, генеральный директор Университета 20.35

Но в конце этого учебного года нам предстоит резкое масштабирование. Раньше в течение одного семестра онлайн-экзамены сдавали несколько десятков тысяч студентов. И технологии позволяли это делать. Сегодня для прохождения всеми вузами этого испытания придется обеспечить работу сотен тысяч студентов и в короткий промежуток сессии.

Самое главное для вуза — перенести содержание экзамена в онлайн-форму, содержание, которое изначально не спроектировано для проведения в дистанционном формате. Это значит, что необходимы изменения, связанные с самими заданиями, с адаптацией контента заданий и формата ответов, с изменением условий, при которых студенты решают те или иные задания. В удаленном формате лучше давать задания, требующие от студента не просто знаний, а умения их быстро применить для конкретной задачи.

Вузу и преподавателю следует рассмотреть альтернативные решения. Можно отказаться от экзаменов в пользу других форм оценки знаний, например, проектной работы или накопительного итога к концу семестра. Университет 20.35 развивает решения, которые позволяют по каждому студенту накапливать цифровой след, информацию о том, как работал студент, насколько он был вовлечен в решение задач, какие были промежуточные результаты, чтобы можно было быть уверенным, что именно этот студент проявил должные знания и умения в процессе работы. Многие университеты смогут этой возможностью воспользоваться, особенно, если информационные системы вуза позволяют собирать такую информацию.

Университет 20.35 считает, что экзамены в ближайшем будущем могут исчезнуть совсем. Они будут распределены во времени, мы постоянно будем иметь информацию о том, каких результатов достиг обучающийся. Мы сегодня работаем над технологиями, которые позволяют оценивать студента по его реакции на контент и на задания. Используя обратную связь от студента, наблюдая за его эмоциями, за тем, насколько он вовлечен в процесс, как он взаимодействует с контентом, можно узнать действительно ли он усвоил материал и изучил дисциплину, понимает ли он материал и как решать ту или иную задачу.

Но важно не забывать, что экзамен — это всегда испытание, это важная цель. Достижение цели, оценка – это мощный мотивационный фактор. Если откажемся от экзаменов, нам нужно будет по-другому научиться работать с целями и мотивацией студентов. Например, через вовлечение студентов в решение реальных задач, реализацию собственных проектов.

Мы ежедневно общаемся с сотнями вузов, тесно работаем с горячей линией Министерства науки и высшего образования. Минобрнауки обозначило позицию: университеты вправе отказаться от государственного экзамена. Мы провели опрос руководителей вузов в закрытом режиме, а также задали те же самые вопросы через канал «Научно-образовательная политика».

Евгений Сжёнов, научный руководитель экспертно-аналитического центра «Научно-образовательная политика»

На вопрос «Ваш вуз готов к проведению итоговой аттестации студентов с помощью дистанционных технологий?» 57% читателей журнала ответили «Да», а 43% признали, что не готовы.

На вопрос «Вы знаете, как работает система прокторинга при проведении онлайн-экзаменов?» утвердительно ответили 39%. 61% представителей вузов оказались не знакомы с этими технологиями. А скоро всей системы высшей школы предстоит столкнуться с прокторингом.

Прокторинг – это процедура наблюдения и контроля за дистанционным испытанием (от англ. «proctor» – человек, который следит за ходом экзамена в университете).

При этом 66% вузов не планируют отказываться от проведения госэкзамена. В то же время ряд ведущих университетов, в том числе московские университеты готовы отказаться от проведения в 2020 году государственного экзамена.

Данные этого опроса коррелируют с результатами закрытого опроса. Мы опросили больше 200 университетов и выяснили, что от государственного экзамена планируют отказаться далеко не все, несмотря на то что такое послабление есть.

Студенты 423 российских вузов оценили качество оперативной обратной связи с кафедрами, деканатами и ректоратам. 64% считают обратную связь отличной, 27% — приемлемой и 9% считают качество обратной связи плохим. Этот опрос мы провели неделю назад и связались со студентами, которые оценили качество обратной связи с вузом как «плохое». Выяснилось, что университеты пошли самостоятельным путем и использовали собственные IT-разработки. И перегрузили свои серверы. Основные проблемы наблюдаются именно по этой причине.

У нас пятилетний опыт вступительных испытаний, промежуточных аттестаций и защит в онлайне на платформе Росдистант. В 2016 году диплом в онлайне защищали 388 человек, в 2019 году — 925 человек. В 2020 году на защиту в режиме онлайн планируется вывести 4660 человек.

Михаил Криштал, ректор Тольяттинского государственного университета

В личном кабинете студента в Росдистанте указаны курсы, которые студент проходит, как он продвинулся в освоении курса, сколько набрал баллов. Дальше формируется отчет, ведомость, электронная зачетная книжка. Если студент вовремя не набрал нужное количество баллов, проводится повторная промежуточная аттестация, студент повторно подключается к курсу и в течение года может набрать недостающие баллы. Если он не прошел повторную промежуточную аттестацию, то проводится проверка знаний через вебинарную площадку, где собираются члены комиссии. Студент сдает экзамен в формате видеокоммуникации с членами комиссии.

В этом же формате проводится защита выпускных квалификационных работ, сдача госэкзамена.

Самое главное в этой истории — обеспечить аутентификацию при прохождении вступительных экзаменов, высокий уровень прокторинга. Программа сверяет внешность студента на экране, сопоставляет его с фотографией, изначально загруженной в систему. Присутствие членов комиссии возможно в онлайне одновременно или по отдельности.

Такая система дает не меньший уровень защиты от подсказок, как если бы студент находился в аудитории. Студента видит сотрудник центра тестирования, видят члены комиссии. Сама процедура экзамена записывается на камеру и хранится длительное время. Всегда можно посмотреть, куда глядел студент и что он делал руками.

Экзамен с билетами на столе уйдет в прошлое. В качестве экзамена будут восприниматься постоянные перманентные системы оценки, такие как балльно-рейтинговая и накопительная, портфолио, результаты разработок студентов.

Сейчас на рынке есть несколько прокторинговых решений и все они позволяют контролировать процедуру экзамена. Они получают доступ к компьютеру студента, видят, что происходит в браузере, следят, пользуется ли студент сторонними приложениями. Есть возможность в онлайне наблюдать за студентом по вебкамере, смотреть чтобы он не списывал, и предлагать ему различные упражнения. Есть возможность подключать камеру мобильного телефона, чтобы показать, что происходит вокруг.

Никита Мишаков, специалист по развитию платформы прокторинга онлайн-экзаменов ProctorEdu

Сейчас уровень доверия к прокторинговым сервисам недостаточно высокий. Но используемые технологии затрудняют списывание. По опыту проведенных вступительных экзаменов — уровень списывания не больше, чем в аудитории. А возможно и меньше, потому что есть возможность сохранить запись экзамена и вернуться к ней позже. Все это позволяет сохранить высокий уровень честности и высокий уровень доверия к экзаменам с прокторингом.

Многие вузы пользовались прокторингом еще до перехода на дистанционное образование. В некоторых случаях это необходимо, например, когда тысячи студентов проходят массовый экзамен или при проведении Олимпиад для участников со всей страны. Сомнения у партнеров возникают только с точки зрения технологического обеспечения. Прокторинг для многих еще остается «страшным зверем», который требует больших вложений и технических ресурсов. На самом деле сейчас прокторинговые сервисы работают достаточно оперативно, интегрируются с LMS-системами.

Сейчас у вузов еще есть время, чтобы подключить прокторинговые сервисы и провести экзамены в онлайн-формате вместо того, чтобы переносить их или отменять. Формат контроля знаний скорее всего будет в виде записи проектных работ или цифрового следа. В сегодняшнем виде экзамен показывает наличие знаний, а это уже не актуально.

На своем опыте могу сказать, что большинство людей не склонны списывать, если знают, что их контролируют и может последовать наказание. Поэтому эффект от прокторинга — контрольно-психологический. 90% студентов будут лучше готовы к экзамену только потому, что будут знать, что списать сложно.

Дмитрий Истомин, генеральный директор компании Examus

Когда мы говорим про онлайн-экзамены, мы имеем в виду онлайн-тесты. Это самая простая практика. Прокторинг можно сделать и на устный экзамен, и на письменный экзамен. Можно контролировать практические навыки работы на компьютере с программами. Самое сложное — экзамены по специальностям, которые не имеют отношения к компьютерам, например у медиков.

Когда мы осознали, что итоговую аттестацию предстоит проводить в онлайн-формате, все проблемы разделили на три составляющие: информационная, коммуникационная и организационная.

Михаил Краснянский, ректор Тамбовского государственного технического университета

Самое простое решение нашли для информационной задачи. В вузе функционирует своя система LMS и система тестирования — «АСТ-тестирование». Основная информационная задача решалась через личные кабинеты студентов и преподавателей и через личные кабинеты партнера. В личном кабинете преподаватель может размещать задания, студент ­– результаты и накапливать цифровой след.

Для коммуникаций мы использовали Zoom, Microsoft Team и группы в социальных сетях. Студентам и преподавателям мы предоставили свободу выбирать наиболее удобные каналы коммуникаций.

Экзамены в школе и в университете определенным образом готовят к более сложным экзаменам в жизни, поэтому они должны остаться. А очень серьезное подспорье для качественной оценки на экзамене — это цифровой след.

Когда экзамен проходит в аудитории, преподаватель следит за тем, чтобы процедура соблюдалась и обучающиеся отвечали на вопросы, не обращаясь к помощи шпаргалок или технических средств. Но как убедиться в том, что студент не списывает во время дистанционного испытания? На помощь в этом университетам приходит технология прокторинга.

СПбГУ предложил создать в России ассоциацию академической честности

О том, чем удобна система контроля за прозрачностью проведения экзамена и почему Университет начал ее использовать еще до начала пандемии, рассказал директор Центра развития электронных образовательных ресурсов СПбГУ Владимир Старостенко.

Владимир Андреевич, расскажите, пожалуйста, что такое прокторинг. Какие виды систем мониторинга сегодня существуют?

Проблема злоупотреблений во время экзаменов всегда стояла остро. Сколько бы веков они ни проводились, всегда находятся экзаменуемые, которые пытаются обойти систему. Например, участники экзаменационных испытаний на чиновничью должность в Древнем Китае писали сочинение в отдельной келье, куда ничего не разрешали брать с собой. Однако «умельцы» писали шпаргалки, например, на нательной рубахе или прямо на теле, поэтому существовали специальные сотрудники, которые следили за «чистотой» экзаменов.

Сам по себе термин «проктор» появился задолго до эры цифровизации. Так называли специальных сотрудников английских университетов, которые должны были отслеживать соблюдение дисциплины, причем не только на экзаменах. Прокторинг в нынешнем понимании — это процедура контроля за ходом аттестационного испытания, которое проводится в дистанционном режиме, при этом особая программа записывает весь процесс (аудиопоток, видео самого сдающего и все то, что происходит на рабочем столе).

Прокторинг может быть синхронным и асинхронным. В синхронном варианте за испытуемым в режиме реального времени наблюдает специально обученный проктор. Фактически это так же, как во время сдачи в аудитории, когда преподаватель или его ассистент отслеживают, чтобы экзаменуемые не пользовались вспомогательными средствами и не переговаривались друг с другом.

В асинхронном варианте экзамен проводится под контролем алгоритма искусственного интеллекта, а затем прокторы просматривают видеозаписи, чтобы оценить, насколько правомерны те замечания, которые сделала машина, и, возможно, найти какие-то новые нарушения.

Дело в том, что человек способен комплексно оценить действия испытуемого с учетом общего контекста. То есть если во время тестирования в комнату к испытуемому по незнанию заглянул кто-то из родственников, то искусственный интеллект примет это за нарушение, поскольку зафиксирует появление в кадре постороннего человека или услышит чей-то голос, но проктор-человек, оценив происходящее, не станет рассматривать случившееся как нарушение правил. Именно поэтому рассказы студентов о том, как им поставили отрицательный статус прокторинга из-за того, что в кадре мелькнул кот, не более чем «страшилки».

Существует еще вариант автоматического прокторинга, когда человек вовсе не перепроверяет машину, однако этот способ применяется крайне редко, поскольку даже самый совершенный ИИ пока может ошибаться. В Санкт-Петербургском университете к нему никогда не прибегали.

Насколько активно эта технология применяется в разных вузах России и зарубежных странах?

В период пандемии о прокторинге заговорили особенно широко, поскольку обучение пришлось перевести в дистанционный формат и количество подобных экзаменов резко выросло. Однако эта процедура была востребована всегда и активно применялась вузами с момента своего появления, так как проблема легитимности оценки в дистанционном обучении стоит очень остро. Противники онлайн-обучения очень часто пытаются привести аргумент «против»: непонятно, кто «нащелкал» за обучающегося ответы, в итоге грош цена полученной оценке. Прокторинг как раз и нацелен на то, чтобы однозначно понимать и иметь возможность подтвердить, что обучающийся сдавал тестирование сам и эта оценка подтверждает его знания по предмету.

Каков масштаб рынка компаний, предоставляющих услуги прокторинга в России и за рубежом? Чем они отличаются друг от друга? Какие из них становятся наиболее популярными?

В России самыми крупными организациями являются «Экзамус» и ProctorEdu, кроме того, у некоторых вузов есть свои наработки и локальные решения в плане прокторинга. Различия между системами кроются в деталях, но в целом они несущественны, поскольку принцип один — программа должна помочь идентифицировать личность сдающего, выявить нарушения в ходе экзамена и записать весь процесс от и до.

Среди зарубежных сервисов, предоставляющих услуги прокторинга, одним из самых популярных и распространенных является ProctorU, сотрудничающий с более чем 500 американскими вузами. Однако существует также множество других прокторинговых систем, которые используются при прохождении итоговых аттестаций на различных стадиях образовательного процесса. Сразу оговоримся, что между российскими и зарубежными системами разница все-таки есть. Большинство из них не приспособлено к внедрению в учебный процесс российских вузов, поскольку они не отвечают требованиям по локализации. Еще очень важно отметить, что по ФЗ-152 «О персональных данных» все собираемые персональные данные должны храниться на серверах, размещенных на территории РФ.

Сколько российских университетов внедрили у себя систему прокторинга? Какая часть от общего числа экзаменов на сегодняшний день проводится с ее помощью?

К сожалению, я не обладаю подобной статистикой, однако замечу, что все вузы, которые обучают студентов, скажем, на онлайн-курсах по сетевым договорам, используют систему прокторинга. Например, партнер Санкт-Петербургского университета «Экзамус» в период с февраля по июль 2021 года провел 289 тысяч тестирований для различных университетов России и ближнего зарубежья. Помимо СПбГУ к его услугам прибегали Высшая школа экономики, Южный федеральный университет, Казанский федеральный университет, Московский физико-технический институт, Национальный исследовательский технологический университет «МИСиС», Российская академия народного хозяйства и государственной службы при президенте РФ, Российский государственный педагогический университет имени А. И. Герцена, Санкт-Петербургский государственный университет промышленных технологий и дизайна. Также экзамены с его помощью организовывали Сургутский государственный университет, Томский государственный университет, Тюменский государственный университет, Уральский федеральный университет, Балтийский федеральный университет имени Иммануила Канта, Пермский государственный медицинский университет имени академика Е. А. Вагнера, Югорский государственный университет, Сахалинский государственный университет и многие другие региональные вузы.

Вот еще пример: во время локдауна СПбГУ открыл доступ ко всем своим онлайн-курсам на платформе «Открытое образование», и на них прошли обучение 13 тысяч студентов из 89 вузов. Конечно, разные университеты по-разному определяли для себя формат итоговой аттестации, и некоторые из них ввиду форс-мажорных обстоятельств могли просто засчитывать прохождение всех контрольных заданий, но если же вуз выбирал для себя перезачет онлайн-курса после предъявления сертификата о его освоении, то все эти студенты в обязательном порядке проходили итоговую аттестацию с прокторингом.

Различаются ли правила проведения прокторинга в зависимости от вуза и кто их устанавливает? Требуют ли они в таком случае унификации?

Если и различаются, то незначительно. Например, какой-то вуз может позволить испытуемым пользоваться какими-то вспомогательными материалами при сдаче определенного предмета, но это, скорее, исключение из правил, которое будет оговариваться отдельно. Если мы говорим об общих правилах прокторинга, то они будут одними и теми же. В итоге требования сводятся к тому, что человек должен пройти тестирование самостоятельно, не прибегая к помощи третьих лиц, не списывая, никуда не подглядывая, не открывая посторонние сайты и программы, не фиксируя экзаменационные вопросы, поскольку в противном случае они будут тут же скомпрометированы и потребуется немедленное обновление всей вопросной базы. Как мне кажется, строгая унификация здесь не требуется, речь может идти скорее о дополнительной международной стандартизации самого сервиса с тем, чтобы процедура стала еще более прозрачной для всех вовлеченных сторон.

В настоящий момент международных стандартов порядка проведения экзамена в дистанционном формате не существует, как и обязательных требований. Все сводится к цели, которой хотят достичь вузы во всем мире, — легитимизировать оценку знаний, укрепить доверие к онлайн-обучению и подтвердить «вес» собственного диплома.

Участники Всемирного союза массовых открытых онлайн-курсов обсудили перспективы развития и планы на будущее

Обсуждается ли тема прокторинга во Всемирном союзе массовых открытых онлайн-курсов МООК, в который входит СПбГУ? Были ли приняты какие-либо решения для усовершенствования системы контроля за экзаменационным процессом?

Да, на недавнем заседании правления Всемирного союза МООК, которое состоялось 2 декабря, как раз была поднята тема прокторинга. Конкретных решений пока не было, но в рамках действующих инициатив планируется провести обсуждение опыта вузов и организаций — учредителей союза, а также сложившихся практик при проведении мониторинга прохождения обучающимися контрольных испытаний, в том числе и в рамках обучения с использованием онлайн-курсов, в целях международной стандартизации данного сервиса.

Столкнувшись с необходимостью проведения экзаменов в онлайн-формате и вместе с тем с организацией дистанционного контроля, образовательные организации обсуждали как преимущества, так и недостатки системы прокторинга. Что побудило Университет к ее внедрению и какие аргументы убедили в ее необходимости, учитывая, что СПбГУ пришел к этому решению еще в докоронавирусную эпоху?

Давайте начнем издалека. Чего вуз хотел добиться, вводя обучение в онлайн-формате, которое, как вы верно заметили, СПбГУ внедрил еще до пандемии? На самом деле одного — чтобы студентам было удобнее. Не нужно ехать ранним субботним утром под снегопадом на потоковую лекцию, а можно самому организовать свое время и учиться в удобном для себя режиме. Как и все новое, эта инициатива была изначально воспринята в штыки, и студентам потребовалось какое-то время, чтобы ее «переварить» и оценить по достоинству. Изначально итоговые тестирования проводились в аудиториях без прокторинга, но это требовало участия большого количества сотрудников Университета и опять-таки необходимости куда-то ехать в строго назначенное время, причем иногда в совершенно непривычный учебный корпус.

Если мы опустим проблему безопасности во время пандемии, то Университет, вводя систему прокторинга, исходил, во-первых, из удобства. Студенту намного комфортнее сдать экзамен дома, самому выбрав подходящее время, причем в весьма широком интервале. Более того, если все-таки не забывать о нынешних реалиях, то это куда безопаснее для здоровья, да и многие студенты в принципе не имеют возможности присутствовать на испытании очно, находясь, например, на карантине или не сумев приехать из-за закрытых границ.

Во-вторых, Университет очень трепетно относится к объективности результатов обучения. Диплом СПбГУ — это знак качества, именно поэтому работодатели часто в требованиях к кандидату оговаривают специальные условия для выпускников Университета. За каждой оценкой в дипломе должны стоять реальные знания. Если мы отмотаем время назад в «доцифровые времена», то родители многих нынешних студентов могут вспомнить случаи, когда оценку можно было, как выразилась одна моя коллега, просто «наныть». Преподаватели — живые люди, которых можно правдами и неправдами разжалобить, уговорить и так далее. В этом плане «бездушная машина» намного более объективна, поскольку искусственный интеллект просто констатирует факт. Но от полной «машинности» проверки удается уйти, привлекая специалистов-прокторов. Отмечу, что прокторы «Экзамуса» проходят специальную подготовку, в том числе тренинги у ведущих экспертов из США. Процессы проверки, используемые «Экзамусом», признаются во всем мире. Компания имеет опыт работы с более чем 180 заказчиками, в том числе в США и Европе, где требования к качеству прокторинга безусловно высокие и лучшие практики вырабатывались на протяжении более 20 лет. Вот множество «за», которые легли на чашу весов при принятии решения.

О каких результатах можно сказать по итогам опыта применения этой технологии за прошедшие годы?

Если мы говорим об опыте СПбГУ, то количество тестирований постоянно растет. Приведу статистику: в 2019/20 учебном году было проведено более 10,5 тысячи итоговых тестирований по онлайн-курсам, а в 2020/21 — более 34,5 тысячи, что почти в три раза больше по сравнению с прошлым годом. На 2021/22 учебный год уже запланировано около 40 тысяч итоговых тестирований по онлайн-курсам, и это количество увеличится в весеннем семестре.

Несмотря на то, что обучающиеся пугают друг друга прокторингом, в масштабах всего Университета ничего страшного не происходит. Из почти 11 тысяч обучающихся, которые в прошлую сессию прошли зачет по дисциплине в формате онлайн-курса, менее 3 % студентов дошли до третьей пересдачи, причем в некоторых случаях в неудовлетворительных оценках виноват был не прокторинг, а недобор баллов. Тех же, кому был поставлен «незачет» по результатам испытания с использованием прокторинга в последнюю сессию, — всего 14 человек.

Если студент не сдал экзамен с применением прокторинга, то в чем обычно заключается причина? Можем ли мы, говоря о процедуре его проведения, считать, что универсанты, отвечающие на вопросы и в аудитории, и дома, находятся в равных условиях?

Иногда возникают проблемы чисто технического характера, такие случаи мы сейчас не будем обсуждать: например, компьютер не проходит проверку, интернет работает недостаточно быстро, во время экзамена произошел разрыв соединения. В таких случаях необходимо сразу обращаться в службу технической поддержки.

Зачастую студенту не удается сдать экзамен с применением прокторинга не из-за того, что он не прошел прокторинг, а из-за того, что не подготовился должным образом, а заодно и нарушил правила (то есть ему был выставлен отрицательный статус прокторинга). Впрочем, даже в случае положительного статуса этот обучающийся получил бы оценку «незачет» из-за недобора баллов.

Если же человек набрал нужное количество баллов, но получил отрицательный статус прокторинга, то здесь действительно имело место нарушение правил, чаще всего речь идет об использовании вспомогательных материалов и технических средств. Конечно, на себе уже никто шпаргалки, как в Древнем Китае, не пишет, но зато телефон — верный помощник многих двоечников.

Как Университет взаимодействует со студентами по вопросам сбора информации о прокторинге? Планируете ли вы поделиться накопленным опытом на международных площадках, где представлен СПбГУ, и поднять вопрос унификации правил в профессиональном сообществе?

Университет всегда ратует за открытость, поэтому студенты могут подавать свои вопросы и жалобы в Виртуальную приемную СПбГУ. Кроме того, помощь обучающимся буквально в режиме 24/7 оказывает служба технической поддержки support.online@spbu.ru, и ее работники помогают разрешить многие технические сложности в режиме реального времени.

Разумеется, мы собираем статистику по итогам сессии и работаем в плотной связке с коллегами из «Экзамуса», которые тоже постоянно совершенствуют свой сервис. Как я уже упоминал выше, в рамках деятельности Всемирного союза МООК в ближайшее время будет инициирован обмен опытом между участниками союза. Кроме того, проблема обсуждается и в профессиональном сообществе — например, на собраниях правления национальной платформы «Открытое образование».

Сможет ли, на ваш взгляд, система прокторинга когда-нибудь навсегда заменить экзаменаторов и формат проведения экзаменов в аудитории?

Если мы говорим о ближайшей перспективе, то нет, потому что в некоторых случаях все-таки нужен непосредственный контакт с преподавателем, например при сдаче устного аспекта иностранного языка. Однако технологии не стоят на месте, и то, что казалось сказкой каких-то двадцать лет назад, сейчас становится былью. Могу сказать одно — хотелось бы верить, что в один прекрасный день мы победим пандемию и все вернется на круги своя. Потребность в прокторинге неизбежно снизится, но спрос на качественное онлайн-обучение сохранится, а значит, сервисы будут развиваться, ну а дальше — увидим!

Понравилась статья? Поделить с друзьями:
  • Экзамен с оценкой или нет
  • Экзамен с ответами по птэ ржд
  • Экзамен с микронаушником как передать тему билета
  • Экзамен с машей ефросининой ютуб
  • Экзамен с машей ефросининой последний выпуск