Как обойти систему прокторинга на экзамене

Пандемия показала, что система отечественного образования срочно нуждается в модернизации, а также готовности перейти на онлайн-формат. При этом одни вузы более готовы к ней, другие – менее. 

О новостях из жизни разных вузах вы можете читать на нашем телеграм-канале, который постоянно пополняется новостями. А в группе время от времени раздают бонусы и скидки студентам.

Одним из новейших решений стала система прокторинга. О том, что это такое, как оно работает и когда применяется – расскажем далее.

Что такое прокторинг и почему с ним лучше

Личный контакт с преподавателем (особенно на экзамене) многих пугает, как и ожидание перед дверью, тишина и зоркое внимание экзаменатора за каждым движением. Стоило преподавателю просто заподозрить обман. Он мог выставить студента для пересдачи. Это вносило оттенок субъективности.

С онлайн-прокторингом все стало объективнее и проще.

Прокторинг – система контроля на онлайн-экзамене/тестировании. Контроль осуществляет проктор – администратор, который наблюдает за процессом через веб-камеру.

Онлайн-прокторинг позволяет подтвердить личность учащегося, исключить использование шпаргалок и помочь преподавателю объективно оценить знания.

Сегодня технологии прокторинга сильно развиты. Есть 3 вида отслеживания онлайн-тестирования:

1. Проктор-человек: администратор следит за процессом по камере, фиксируя нарушения.
2. Автопрокторинг: программа автоматически распознает личность учащегося, мониторит его поведение, следит за направлением взгляда, анализирует появление посторонних предметов и звуков в помещении, ищет нарушения на видео и делает на основании полученных данных отчеты.
3. Комбинированный способ: программа и человек. Могут быть вариации. Например, весь процесс может контролировать программное обеспечение, подавая проктору сигналы о нарушениях. Есть другой вариант, когда администратор в онлайн-режиме сам отслеживает деятельность одновременно нескольких учащихся в программе. Второй способ считается более надежным.

Проктор – это не экзаменатор, а независимое лицо, которое никаким образом не заинтересовано и не участвует в учебном процессе. Он следит за соблюдением правил экзамена. Им может быть преподаватель из других учебных заведений или специально обученный человек. 

Вуз может использовать синхронный прокторинг с помощью программы «Экзамус» (или другой, синхронный с участием проктора) и асинхронный прокторинг (система ведет запись всего процесса с фиксацией нарушений без прерывания экзамена, а запись потом проверяют специальные люди).

Как проходит экзамен во время прокторинга

Экзамен в системе прокторинга можно пройти в любом месте, где есть надежный интернет и веб-камера.
Учащемуся нужно заранее установить на свой компьютер специализированное ПО, которая будет записывать экран.

Процедура выглядит следующим образом:

1. Включить компьютер примерно за 20 минут до начала и зарегистрироваться в системе.
2. Протестировать оборудование на соответствие техническим требованиям, пропускает ли устройство экзамен (не закрыты ли порты, не запрещен ли доступ).
3. Подключиться к видеотрансляции, дать разрешение системе вести запись с экрана компьютера.
4. Верифицировать свою личность с предъявлением документов на камеру (водительские права или паспорт).
5. Показать помещение, рабочий стол (если попросит проктор) и начать проходить экзамен.

Что запрещено делать во время прокторинга

Есть четкий порядок действий, которые можно совершать во время экзамена в системе прокторинга. Например, можно пользоваться рукописным конспектом, звонить проктору, если возникли технические проблемы (пропал интернет, отключили свет и т.д.).

А вот чего делать нельзя:

• перемещаться по другим вкладкам в браузере;
• быть в наушниках;
• использовать подсказки или помощь третьих лиц во время экзамена;
• уходить без предупреждения или делать звонки по телефону.

Если проктор обнаружит хотя бы одно нарушение, он зафиксирует все и передаст замечания преподавателю. Если студент совершает сразу несколько грубых нарушений или не реагирует на замечания проктора, экзамен можно прервать или даже аннулировать.

Где можно использовать прокторинг

Эта система, ставшая популярной в сфере образования из-за пандемии, может быть полезной и в следующих сферах:

1. Подбор персонала. Руководители и менеджеры по персоналу могут проводить собеседования и проверку профессиональных навыков кандидатов со всех уголков страны (и даже за ее пределами) без потери времени и денег.
2. Онлайн-обучение. Компании выгодно отправлять сотрудников на обучение. Но обучение в офлайне приводит к отрыву персонала от работы и большим финансовым вложениям. Обучение сотрудников онлайн с последующей сдачей экзаменов в системе прокторинга – это проверка профпригодности и повышение квалификации персонала без отрыва от производства. А еще работодатель всегда может быть уверен, что его вложения в сотрудников оправданы, так как на экзамене за участниками будут следить.
3. Тестирование/аттестация сотрудников. Систему прокторинга эффективно используют для определения у персонала hard skills. Это нужно, когда сложно принять решение о надбавках.

Советы по подготовке к экзамену в системе прокторинга

Если вы раньше никогда не проходили экзамен с прокторингом, вот несколько советов, которые помогут пройти испытание без лишней нервотрепки и проблем:

1. Выберите для экзамена отдельное тихое помещение, чтобы вас никто не отвлекал. Если собираетесь сдавать экзамен дома, попросите домашних не беспокоить вас в этот промежуток времени. Ограничьте доступ домашних животных, чтобы они не отвлекали вас.
2. Если проходите экзамен на работе/в офисе, лучше делать это в нерабочее время, чтобы рядом не было коллег.  Посторонние шумы (разговоры, хождение людей и т.д.) – это грубое нарушение.
3. Предварительно пройдите тест оборудования, чтобы не терять время на устранение технических неполадок непосредственно во время экзамена. Протестируйте камеру и микрофон, пройдите верификацию личности. Настройте освещение – так проктору будет легче идентифицировать ваше лицо и паспортные данные.
4. Если во время экзамена захотите в туалет, сообщите об этом проктору в чат. Учащемуся на это отводится 2-3 минуты.
5. При технических неполадках позвоните проктору. Форс-мажор в виде отключения интернета, света или отключения компьютера – достаточная причина, чтобы продлить экзамен или хотя бы не зачесть ее как нарушение.

Как обойти прокторинг на экзамене

Лучше не искать способы, как обмануть прокторинг. Если у проктора возникнут подозрения, он может досрочно завершить экзамен.

Но некоторых это не пугает. Студенты умудряются подключаться по микронаушнику задолго до начала экзамена. Таким образом можно надиктовать своему помощнику на том конце провода вопрос и прослушать ответ.

Особенно продвинутые качают программы демонстрации экрана. И к моменту начала экзамена помощник студента уже видит по экрану все то же, что видит сам студент. И по тому же микронаушнику получает правильный ответ.

Разработчики не рассказывают о том, какие технологии используют в системе онлайн-прокторинга. Это не только коммерческая тайна, но и способ не дать студентам разобраться в них, чтобы потом искать методы обхода.

С первого взгляда может показаться, что система прокторинга в электронном обучении слишком строга. На самом деле сдать в ней экзамен гораздо проще, чем у преподавателя. Здесь напрочь отсутствует субъективное отношение, человеческий фактор в виде плохого настроения/самочувствия преподавателя. Можно надеяться только на свои знания.

Впрочем, в любом случае у вас всегда будет надежная поддержка в виде сервиса студенческой помощи. 

Технические гаджеты, такие как смарт-часы и микрофоны.– Эти устройства позволяют студентам общаться об экзамене с людьми извне. Умные часы также можно использовать для хранения ответов на тесты. Использование удаленного программного обеспечения. Это один из самых популярных способов обмана в онлайн-оценках.

Точно так же Что означает наличие прокторинга на экзамене? Определение: Тестовая закупка тестирование проводится под наблюдением уполномоченного, нейтрального наблюдателя, который обеспечивает личность тестируемого и целостность среды тестирования.

Как лучше всего списать на экзамене с прокторингом? Как обмануть на онлайн-экзамене

1. Отправка скриншотов эксперту. …
2. Совместное использование экрана или зеркалирование для обмана. …
3. Обман с технологическими устройствами. …
4. Выдача себя за другое лицо или использование друга. …
5. Перехват видеопотоков. …
6. Использование внешнего проектора. …
7. Использование виртуальной машины. …
8. Другие нетехнические подходы к обману.

Кроме того, можно ли провести экзамен без вашего ведома?

Если вы не знаете, Экзамены с прокторингом — это запланированные по времени экзамены, которые вы сдаете, пока программное обеспечение прокторинга отслеживает рабочий стол вашего компьютера, а также видео и аудио с веб-камеры.. Данные, зафиксированные программным обеспечением для прокторинга, передаются в службу прокторинга для проверки.

Может ли AutoProctor обнаружить мошенничество?

AutoProctor — это автоматизированный инструмент, который гарантирует, что учащиеся не мошенничают на онлайн-тестах.. Пока учащиеся проходят тест, AutoProctor следит за их камерой, микрофоном и экраном, на который они смотрят. Так, например, если они попытаются найти ответ в Google, это будет обнаружено.

Могут ли обследования под наблюдением обнаруживать телефоны? Программное обеспечение удаленного прокторинга Honorlock может обнаруживать использование мобильных телефонов, планшетов и ноутбуков во время сдачи экзамена студентом.. Наш искусственный интеллект может определить, когда студенты пытаются использовать свои мобильные телефоны для доступа к содержимому банка тестов во время экзамена.

Могут ли контролируемые исследования обнаружить кабель HDMI? Proctor не может обнаружить кабель HDMI во время работы. Роль этого кабеля состоит в том, чтобы отразить ваш экран и отобразить его в соседней комнате.

Может ли AutoProctor обнаружить переключение вкладок? Хотя мы явно не хотим раскрывать наши точные алгоритмы, мы принимаем в качестве входных данных аудио- и видеопоток пользователя, переключается ли пользователь с теста на другую вкладку/приложение, так далее. В конце теста наш запатентованный механизм искусственного интеллекта вычисляет показатель доверия на основе всех собранных доказательств.

Автопроктор платный?

Стоимость 10 долларов за 200 попыток тестирования. Если вы хотите, чтобы несколько пользователей имели доступ к одной и той же учетной записи, вы можете сделать это, купив Премиум-подписку. При этом вы можете создать команду на AutoProctor.

Отслеживает ли Прокторио движение глаз? Прокторио не отслеживает движения глаз, но мы можем использовать функцию распознавания лиц, чтобы испытуемые не отворачивались от экзамена в течение длительного периода времени.

Что может обнаружить Прокторио?

Во время экзамена Прокторио может делать скриншоты вашего рабочего стола, определить количество компьютерных мониторов, подключенных к вашему компьютеруили записывайте свой веб-трафик. Эта информация будет записана только в том случае, если профессор включил ее в настройках экзамена.

Отслеживает ли ProctorU движение глаз? У каждого учащегося, контролируемого ProctorU, отключен браузер. Система использует ИИ для наблюдения за движениями глаз учащихся., движения головы, язык тела и набор текста на протяжении всего теста.

За что вас будет отмечать Прокторио?

Прокторио записывает причины, по которым попытки экзамена завершились, чтобы дать полный контекст того, что произошло во время экзамена. Попытки, прекращенные по подозрительным причинам будет содержать красный флажок в строке Журнала успеваемости.

Как узнать, использует ли кто-то AutoProctor?

Может ли AutoProctor определить ваше лицо? Количество людей: мы ожидаем, что викторины на AutoProctor будут проходиться одним человеком. Таким образом, мы ожидаем, что одно (и одно и то же) лицо будет постоянно отображаться на экране. Включение этого параметра означает, что всякий раз, когда AutoProctor обнаруживает либо ноль лиц с помощью камеры, либо обнаруживает 2 или более лиц, событие помечается.

Можем ли мы списать на экзамене под наблюдением? Студенты часто могут копировать и вставлять ответы из документов или блокнотов., который будет подготовлен в отдельном окне перед началом теста. Это простые способы обмануть некоторые программы удаленного прокторинга, у которых нет информации о том, что происходит на экране.

Записывает ли AutoProctor ваш экран?

Кандидаты не могут просматривать или открывать другие вкладки, кроме тестового экрана. Экранный рекордер записывает все действия кандидата во время экзамена..

Как отключить Автопроктор? Вам не нужно сохранять эту настройку. Только что щелчок по флажку слева от опции автоматически сохраняет опцию. Включить прокторинг: переключение между включением и отключением прокторинга.

Может ли форма Google обнаружить мошенничество?

Нет, учитель не будет проинформирован. Поскольку Google Form не имеет такой функциональности. Однако учебные заведения могут использовать сторонние приложения, такие как autoproctor, которые интегрируются с Google Form, чтобы обеспечить такую ​​возможность мониторинга.

Как Прокторио узнает, что ты жульничаешь? Proctorio обнаруживает мошенничество с помощью программного обеспечения строгого прокторинга, которое отслеживает действия студентов на их компьютерах. Он также фиксирует обстановку на экзамене, помогает идентифицировать студентов и отслеживает их положение в экзаменационной комнате.

Есть ли способ обмануть Прокторио?

Есть и другие, более технические варианты мошенничества. Тестируемый может передать поддельное аудио или видео через виртуальное устройство., который можно просто переименовать, чтобы избежать попадания в черный список Proctorio. Этот же трюк с переименованием можно использовать для запуска Proctorio на виртуальной машине.

Насколько хорошо Proctorio отслеживает взгляд? Исследование 2018 года, в котором приняли участие 2,686 студентов на 29 курсах, показало, что те, чьи экзамены не контролировались с помощью Proctorio, получили оценки на 2.2% ниже, чем те, чьи экзамены. Авторы пришли к выводу, что результаты, вероятно, были результатом мошенничества со стороны студентов, не использующих Proctorio.

Сообщает ли вам ProctorU, если вас помечают? комментарии к событиям на временной шкале от прокторов или руководства. ТРЕВОГА — Счетчик отображает, есть ли какие-либо активные, помеченные инциденты (в соответствии с критериями учреждения) на временной шкале встречи..

Как Proctorio обнаруживает телефоны?

Proctorio не может обнаружить телефоны, но веб-камера покажет, смотрите ли вы вниз или в сторону, чтобы использовать телефон.

Может ли проктор видеть ваш экран?

Прокторы имеют возможность просматривать экран и используйте мышь и клавиатуру, как будто они сидят рядом с вами. После начала экзамена инспектор будет следить за всем, что происходит на экране компьютера, но больше не сможет пользоваться мышью и клавиатурой.

Может ли ProctorU обнаружить кабель HDMI? Может ли Proctor обнаружить HDMI? Proctor не может обнаружить кабель HDMI во время работы. Роль этого кабеля состоит в том, чтобы отразить ваш экран и отобразить его в соседней комнате. Таким образом, любой, кто смотрит на экран в соседней комнате, сможет найти ответ на интересующий его вопрос и передать его тестируемому.

Так как пандемия COVID-19 продолжает свирепствовать по всему миру и быстрого конца дистанционному обучению не видно, многие студенты сдают экзамены под наблюдением программного обеспечения для контроля, такого как Proctorio. Оно контролирует студентов с помощью алгоритмических систем, которые, среди прочего, отслеживают движения глаз, нажатия на клавиатуру и аудиовходы.

Университеты иногда выкладывают тысячи долларов за экзамен с Proctorio, что, по крайней мере, помогает создать впечатление сохранения академической честности во время дистанционного обучения. Но у некоторых студентов использование Proctorio и других онлайн-сервисов по контролю вызывает агрессию и беспокойство, подвергая их и их окружение необоснованному наблюдению, от которого трудно отказаться без отрицательного воздействия на учебу.

Тем не менее, несмотря на то, что популярные онлайн-платформы для прокторинга, такие как Proctorio, заявляют, что используют «самые современные технологии» и «каждый раз обеспечивают полную учебную целостность каждой оценки», студенты всё равно жульничают на экзаменах.

Издание Motherboard поговорило с 10 студентами университетов из разных стран, которые утверждали, что жульничали на экзаменах, на которых применялось Proctorio.

Мотивы и методы студентов были разными, но есть один общий знаменатель: никого из них не поймали

Относительная легкость, с которой студенты обманывали, и тот факт, что каждый студент мог указать на нескольких сверстников, которые сделали то же самое (по оценкам одного американского студента, 90% его группы жульничали), поднимают вопрос о том, насколько на самом деле эффективно программное обеспечение для онлайн-контроля, такое как Proctorio — и стоит ли оно огромной цены или вторжения в частную жизнь.

«Очевидно, что с Proctorio вам нужно показать себя и свою комнату с помощью веб-камеры компьютера, — сказала Motherboard одна голландская студентка, которая помогла другу жульничать на экзамене с несколькими вариантами ответов. — Мой друг положил телефон на подставку на клавиатуре, чтобы его не было видно во время осмотра комнаты и стола».

«Затем он был со мной на связи по FaceTime, — продолжила она. — Телефон был под наклоном, так что он мог видеть меня, а я могла видеть экзамен. Затем я просто показывала карточку с буквами a, b, c или d».

Другой французский студент использовал 10-метровый кабель HDMI, который шел от его ноутбука к экрану телевизора в другой комнате, который повторял изображение на экране ноутбука. Затем его друг просматривал ответы на экзамен и отправлял их через WhatsApp на телефон, который также находился на клавиатуре и не попадал в поле зрения веб-камеры.

«Сработало идеально и я получил хорошую оценку», — сказал он.

Другие студенты использовали менее сложные методы, например, один итальянский студент, который написал шпаргалки карандашом на своем ноутбуке, и бразильский студент, разложивший листы шпаргалок на полу.

«На одном экзамене я просто распечатал свои шпаргалки крупным шрифтом и приклеил их к стене перед собой, чтобы их не было видно, — смеясь, сказал один немецкий студент, успешно сдавший несколько экзаменов. — Я просто осматривал комнату, как будто думал об ответе, а затем смотрел на них».

На экзамене по статистике, допускавшем использование калькуляторов, тот же самый студент прикрепил небольшой листок бумаги за калькулятор, чтобы он был скрыт от глаз во время осмотра стола.

Есть и другие, более технические варианты жульничанья. Тестируемый может передавать аудио или видео через виртуальное устройство, которое можно просто переименовать, чтобы избежать попадания в черный список Proctorio. Этот же трюк с переименованием можно использовать и для запуска Proctorio на виртуальной машине.

Важно отметить, что в случае с Proctorio существует ряд настроек, которые инструкторы могут включать или отключать во время экзаменов, в том числе, будет ли программное обеспечение проверять наличие расширенных экранов и требуется ли сканирование стола. Кроме того, инструкторы могут также устанавливать «значения чувствительности» для ряда действий при просмотре экзамена, включая уровни звука, манипуляции с видео и движения глаз.

Но вопрос о том, действительно ли более высокие значения чувствительности приводят к лучшему выявления мошенничества или просто создают поток ложных срабатываний, остается открытым.

Максимилиан Зайдерер — студент магистратуры, изучающий информатику в Мюнхенском техническом университете на юге Германии. Скептически относясь к эффективности Proctorio и считая программное обеспечение «жутким», он решил подать запрос на доступ субъекта в соответствии с европейским Общим регламентом по защите данных (GDPR), чтобы просмотреть запись своего экзамена — что легко может сделать любой студент, проживающий в Европейском Союзе. Позже сотрудник университета провел Зайдерера через интерфейс Proctorio и его запись экзамена. Он также получил отчет в формате PDF, содержащий кадры и временные метки, в которых Proctorio отмечал «ненормальное» поведение.

«Я хотел посмотреть, как работает Proctorio с точки зрения инструктора, и мне также было любопытно узнать, запечатлел ли он момент, когда я положил снюс [увлажненный табак], — сказал Зайдерер Motherboard. — Я увидел, что это было отмечено, в основном нарушением уровня звука. Когда сотрудник увеличивал чувствительность, было буквально море красных флажков, которые, конечно же, были ложными срабатываниями. Я не могу представить, чтобы кто-то всерьез использовал этот интерфейс».

«На протяжении всего процесса у меня создалось впечатление, что все чувствуют, что должны что-то делать, чтобы гарантировать честность экзаменов, но на самом деле они не верят в это, — продолжил он. — Я разочарован тем, что мой университет платит за такое змеиное масло [ерунду]».

Некоторые студенты, которые говорили с Motherboard, сказали, что факт принуждения к использованию такого программного обеспечения на самом деле увеличил вероятность их жульничанья в качестве акта протеста. Другие сказали, что пандемия COVID-19 заставила их чувствовать себя изолированными и немотивированными к учёбе, но при этом испытывали давление для прохождения тестирования во избежание задержек.

«Корона не лучшим образом ударила по мне и я сбился с пути, — сказал тот же студент, который использовал трюк с кабелем HDMI. — У меня не было мотивации работать, а жизнь была такой испорченной и странной. И, конечно же, был тот факт, что это было своего рода мой посыл Proctorio подальше. Не скажу, что это была основная причина, но определенно её часть».

И хотя Proctorio и другие прокторинговые компании часто представляют свое программное обеспечение как необходимое зло в контексте пандемии, преподаватели утверждают, что есть и другие, более эффективные способы предотвращения академического мошенничества. К примеру, путем корректировки структуры курса, чтобы итоговые оценки основывались на других формах оценивания, таких как среднее значение нескольких промежуточных заданий или open-book exam («экзамен с открытой книгой»), во время которого позволяется использование внешних источников информации. Программное обеспечение для онлайн-прокторинга, безусловно, является простым способом, но это не означает, что этот способ правильный.

Что касается студентов, которые увидели, как легко обмануть экзамены с помощью программного обеспечения для онлайн-прокторинга, то они зачастую не слишком высоко оценивают университеты, которые его используют.

Дистанционная форма обучения позволяет совмещать учебу с работой, а расстояние от места проживания студента до учебного заведения перестает быть препятствием для обучения в любом ВУЗе. Кроме того, стоимость дистанционного образования ниже очного. Однако эта форма обучения требует наличия дополнительных способов контроля со стороны учебного заведения. Они позволяют оценить уровень знаний учащихся при сдаче экзаменов и зачетов. Одним из вариантов такого контроля является прокторинг. Из этой статьи вы узнаете, что это такое и можно ли как-то обойти эту систему.

Определение и назначение системы прокторинга

Дистанционное обучение формирует у студентов научное мышление, развивает навыки самостоятельного усвоения и критического анализа новой информации, учит строить научные гипотезы и проверять их истинность путем проведения экспериментов. В отличие от традиционной формы обучения, передача знаний на расстоянии происходит при помощи лекций, которые можно прослушать на компьютере, а общение с преподавателем ведется в чате. Экзамены и зачеты сдаются в режиме онлайн, а контролируется процесс при помощи системы прокторинга. 

Прокторинг – это система, призванная обеспечить честную сдачу экзаменов/зачетов и защиту курсовых, дипломных работ в онлайн-режиме. 

Система прокторинга позволяет:

• верифицировать студентов с точностью до 99,8%;
• наблюдать за поведением учащихся во время выполнения различного рода заданий (написание контрольной, лабораторной, сдача экзамена или зачета и пр.), требующих контроля преподавателя;
• записывать процесс сдачи экзаменов, зачетов, тестов.

Программа фиксирует направление взгляда студента и сигнализирует проктору о возможном нарушении, например, списывании. Также система способна определить наличие посторонних людей в комнате, фиксируя лица через веб-камеру и анализируя голоса в комнате экзаменуемого.

Виды прокторинга

Существует несколько способов контроля:

• Проктор-человек. Специально обученный человек следит за ходом сдачи экзаменов через веб-камеру и самостоятельно определяет нарушителей.
• Полуавтоматический прокторинг. Система автоматически идентифицирует экзаменуемого и фиксирует возможные нарушения. Затем проктор подтверждает или опровергает предположения программы.
• Автоматический прокторинг. Контроль и принятие решений о нарушениях обеспечивает система. После окончания экзамена программа предоставляет детальный отчет по каждому студенту. 
• Система и человек – совместный вариант. За процессом следит программа, но при малейшем подозрении на нарушение оповещает об этом проктора. 
• Пост-прокторинг. Система записывает подозрительные моменты во время экзаменов, которые затем просматриваются проктором.

В роли проктора, как правило, выступает независимое лицо. Это может быть преподаватель из другого учебного заведения или специально обученный человек. Основная задача проктора – отслеживать и выявлять нарушителей, которые не соблюдают правила проведения экзаменов и прочих испытаний.

Как проходит экзамен с прокторингом

Провести экзамен с системой прокторинга можно в любом месте. Главное, чтобы в помещении был проведен хороший интернет, а также имелся рабочий компьютер с веб-камерой. Также необходимо заранее установить на ПК или ноутбук студентов, собирающихся сдавать экзамен, специальную программу, которая ведет запись процесса с экрана.

Сдача экзамена при помощи ПО выглядит следующим образом:

1. За полчаса до начала экзамена включаем компьютер и регистрируемся в системе.
2. Тестируем оборудование на соответствие техническим требованиям, а также выясняем, есть ли доступ к экзамену.
3. Налаживаем подключение к видеотрансляции – проверяем качество изображения, устанавливаем нужный уровень громкости микрофона и пр.
4. Даем согласие системе на ведение записи с экрана ПК/ноутбука.
5. Подносим к веб-камере в открытом виде документ, удостоверяющий личность (паспорт, водительские права).
6. При необходимости (если потребует проктор) показываем рабочий стол и помещение, в котором находимся.
7. Ждем появления на экране заданий и приступаем к их решению.

В случае отключения электричества или сбоев интернета, следует незамедлительно связаться с проктором. Сделать это можно при помощи телефона, номер которого следует выяснить заранее. 

Правила прокторинга

Для различных мероприятий предусмотрен персональный свод правил. Однако, по сути, они отличаются лишь деталями. Фактически их схожесть прослеживается в следующем:

• Запрещено покидать зону видимости веб-камеры во время экзамена.
• Студент обязан по требованию проктора продемонстрировать лист с решением заданий.
• Нельзя отключать микрофон или уменьшать его громкость.
• Запрещено открывать в браузере другие вкладки.
• Недопустимо во время экзамена вступать в разговоры с третьими лицами.
• Нельзя пользоваться мобильными телефонами, планшетами, умными часами, пейджерами и другими гаджетами.
• Некоторые ВУЗы разрешают во время экзаменов пользоваться своими конспектами.
• Ни в коем случае не стоит выходить из комнаты, не предупредив наблюдателя.

Любое нарушение будет занесено в отчет. Оно может негативно отразиться на итоговой оценке. Если не соблюдать все вышеперечисленные правила, проктор может в любой момент прервать экзамен или вовсе аннулировать его.

Область применения прокторинга

Система такого рода может пригодиться в следующих случаях:

• Подбор персонала. С помощью прокторинга можно провести собеседование и протестировать профессиональные навыки кандидатов из других стран или городов.
• Онлайн-обучение. Сотрудники компаний, которые желают повысить квалификацию или освоить новую специальность, проходят дистанционное обучение, а после сдают экзамены при помощи системы прокторинга. 
• Тестирование и аттестация сотрудников. Прокторинг полезен не только в сфере обучения. Некоторые организации прибегают к услугам системы для проведения тестов перед кадровыми ротациями или принятием решений о повышении заработной платы определенным сотрудникам.

Как обойти систему прокторинга

Обход программы во время экзамена возможен лишь при параллельном использовании дополнительных средств связи – смартфона, планшета или ноутбука. Если соблюдать осторожность, проктор или система не смогут заметить обмана и все задания будут выполнены на высшем уровне. Однако при раскрытии обмана студенту грозят серьезные проблемы. Предлагаем более-менее надежные способы обхода системы прокторинга, которые у некоторых сработали, а у других – нет.

Сервис удаленного доступа

Наиболее подходящий сервис – DeskRoll. Работу этой программы очень сложно отследить. Схема действий такова:

1. Сначала установите программу на свой ПК, на котором планируете сдавать экзамен. 
2. Затем помощник должен подключиться через сайт сервиса и получить доступ к экрану экзаменуемого. 
3. Примерно за час до начала проведения экзамена подключитесь через дополнительное устройство к человеку, который будет вашим помощником. 
4. Обеспечьте вывод информации с экрана основного компьютера на устройство онлайн-помощника. Таким образом, задания от преподавателя одновременно будет видеть и ваш помощник.

Не забудьте закрыть окно программы до начала экзамена, иначе проктор раскроет обман!

От сдающего экзамен требуется лишь имитация мыслительного процесса. Помощник может смело гуглить ответы в отдельной вкладке на своем ПК, а потом возвращаться к компьютеру экзаменуемого и вписывать правильные ответы.

Помощь друга

Этот вариант менее эффективный, чем предыдущий, но у некоторых студентов получалось с его помощью обойти систему прокторинга. Для этого:

1. За пару дней до экзамена разработайте с другом систему знаков и подсказок, при помощи которых он будет сообщать вам правильные ответы. 
2. Затем определите рамки местонахождения помощника. Главное, чтобы он был виден вам, но при этом не попадал в обзор веб-камеры.
3. Когда придут задания, увеличьте масштаб страницы, чтобы ваш друг смог увидеть их.

Нельзя надолго отводить глаза в сторону от монитора, иначе проктор может что-нибудь заподозрить.

Естественно, лучше не пытаться обмануть систему, но окончательное решение за вами.

Полезные советы

Если вам предстоит сдача экзамена с применением системы прокторинга, придерживайтесь следующих рекомендаций:

• Выберите для сдачи экзамена тихую комнату и предупредите всех домочадцев, чтобы никто не входил и не шумел. Желательно попросить их прогуляться на свежем воздухе пока будет идти экзамен.
• На время экзамена уберите домашних животных из комнаты. Их присутствие не запрещено, но будьте уверены, они будут вас отвлекать.
• Лучше заранее протестировать оборудование, наладить связь с проктором и выполнить все необходимые инструкции по установке громкости и пр. Это позволит вам избежать суеты и волнения непосредственно перед началом экзамена.
• Документы для прохождения верификации положите рядом с монитором. Также позаботьтесь о хорошем освещении – откройте шторы или включите свет. В нужный момент поднесите паспорт в открытом виде к веб-камере. 
• Если в ходе экзамена вам захочется в туалет, сообщите об этом проктору через чат. Как правило, у вас будет 2-3 минуты, чтобы вернуться обратно и продолжить решение заданий.

Не имея никакого представления о предмете, сдать экзамен, контролируемый системой прокторинга, практически невозможно. Многие студенты отмечают положительные стороны прохождения испытаний с участием ПО. Программа является неодушевленной, а значит, не имеет никаких пристрастий и у нее отсутствует фактор плохого настроения. В таком случае можно смело рассчитывать на объективную оценку.

Прокторинг на стероидах, или как контролировать онлайн-экзамены +28

Недавно ProctorEdu и КРОК запустили систему для контроля онлайн-тестирования на экономическом факультете МГУ. Она помогает наблюдать за студентами, которые сдают экзамен. 

Эта система «подсвечивает» нарушения, подсказывает, на кого и на что обратить внимание. В результате один преподаватель может контролировать разом несколько десятков студентов, сидящих у себя дома.

Такой подход к онлайн-обучению, прокторинг, первыми внедрили Coursera и Udemy. Разработчики ProctorEdu задумали собственную систему прокторинга в 2016 году именно для учебных заведений, но вскоре поняли, что она способна решать другие, более серьезные задачи.

В конце концов, многие хотя бы раз в жизни списывали в школе или вузе, и мир до сих пор не рухнул, но в некоторых ситуациях жульничество на экзаменах приводит к серьезным последствиям.

Взять тестирование на знание основ информационной безопасности. Сотрудники — уязвимое звено в защите любой компании, и было бы действительно здорово, если бы все они выучили базовые меры предосторожности. Возможно, тогда бы Uber не оштрафовали на $1.2 млн. за утечку персональных данных, и не произошло скандала со взломом Twitter.

А ведь есть ответственная и опасная работа, где от знания должностных инструкций и техники безопасности зависят жизни людей.

Примеров много: от управления поездом до вахты на буровой платформе в открытом море. Это не говоря об экстремальных ситуациях, когда раздумывать просто некогда и нужны готовые, заученные решения.

Как правило, во всех этих сферах сотрудников регулярно обучают, тестируют и аттестуют, но часто это воспринимается, как формальность. К тому же, при популярных сейчас онлайн-экзаменах контролировать соблюдение правил довольно сложно.

Конечно, можно приставить к каждому участнику по проктору, следящему за соблюдением регламента из объектива веб-камеры, но чтобы всерьез протестировать персонал крупной компании за разумные сроки, потребуется целый взвод наблюдателей.

Разработчики ProctorEdu решают эту проблему при помощи нейронных сетей и нескольких десятков других алгоритмов, которые распознают нарушения по набору настраиваемых параметров.

Как это работает

Во время экзамена ProctorEdu ведет запись с камеры, микрофона и экрана компьютера.

Система отслеживает, кто находится в кадре: сравнивает человека с фотографией, сделанной перед началом тестирования, или со сканом паспорта, загруженного перед экзаменом.

Она проверяет, куда смотрит участник, нет ли в кадре других людей, и не говорит ли кто-то поблизости. Кроме того, ProctorEdu следит за тем, чтобы браузер был развернут на весь экран, детектирует переключение на другие окна и подключение дополнительных мониторов, периодически проверяет состояние сетевого подключения. Система собирает статистику по часто используемым диграфам и с ее помощью отслеживает манеру набора текста на клавиатуре.

Обычно, когда алгоритм фиксирует нарушения, например, теряет человека из виду, система сначала выводит на экран предупреждение. Если участник не реагирует, ProctorEdu приостанавливает тестирование, до тех пор, пока он не исправится. При этом делается отметка о нарушении регламента, к которой можно вернуться позже при просмотре видеозаписи экзамена.

На основе нарушений по формуле рассчитывается рейтинг достоверности результатов экзамена.

Оценка доверия базируется на всех метриках, которые отслеживает система (если они включены в настройках конкретного экзамена) и весовых коэффициентах, которые подобраны опытным путем. Оценка показывает суммарный средний процент нарушений за весь сеанс.

ProctorEdu может работать в полностью автоматическом режиме, передавать рейтинг в систему тестирования, которая аннулирует результаты с низким рейтингом достоверности. Но для большей объективности обычно приглашают живого проктора. Он может просматривать записи участников с низким рейтингом доверия уже после экзамена, а может участвовать в нем с самого начала.

В таком сценарии проктор может эффективно контролировать до 30 участников. Ему практически не нужно вмешиваться в ход экзамена. Система сообщает о нарушениях в реальном времени и подсказывает, на кого из подопечных обратить внимание.

Проктор может развернуть видео на весь экран и приглядеться к происходящему, объяснить участнику, что тот делает не так, предупредить о нарушении, приостановить или досрочно завершить экзамен.

Такая технологическая поддержка облегчает работу проктора, ускоряет проведение онлайн-экзаменов и аттестаций и позволяет сохранить высокую достоверность результатов.

Ограничения браузера и детекция лиц

Запись камеры и экрана, распознавание лиц, логирование клавиатуры… Это звучит не секьюрно, поэтому разработчики ProctorEdu сознательно отказались от идеи устанавливать свое ПО на компьютеры участников экзамена.

ProctorEdu работает через браузер при помощи супервизор SDK — JavaScript-библиотеки, в которой реализованы алгоритмы машинного обучения.

SDK не требует установки расширений и плагинов. ProctorEdu интегрируется с сервисом онлайн-тестирования при помощи стандарта IMS LTI или нескольких API-команд. Система запускается на странице тестирования и работает параллельно с ним.

Это удобно для пользователей, и браузер с его политикой безопасности дает независимую гарантию того, что данные собираются только во время экзамена.

Конечно, с таким подходом связаны определенные сложности. Разработчики сами наложили на себя ограничения, с которыми теперь вынуждены жить. Например, у системы нет доступа к оборудованию, процессам, окнам и другим ресурсам компьютера. Поэтому тестирование проходит в той же вкладке, где работает прокторинг. Это позволяет отслеживать переключение фокуса на другие вкладки и окна. Есть и нюансы, связанные с архитектурой и нейросетями.

Распознавание лиц в ProctorEdu реализовано при помощи сверточных нейросетей с использованием OpenCV и Dlib. Они регулярно переобучаются на свежесобранных данных. Для детекции лиц используется отдельная модель.

Разработчики с самого начала планировали запустить эти алгоритмы в браузере. Обычно такие задачи решают при помощи компиляции C++ в WebAssembly (Wasm). Считается, что это хорошая практика.

Чисто теоретически Wasm работает быстрее, чем JavaScript сценарий, но на практике выяснилось, что он медленнее, потребляет больше памяти и процессора, весит больше. Только загрузчик такого кода получается от 10 МБ.

Пришлось разрабатывать на JavaScript в несколько итераций. Первые версии были слабенькими и часто ошибались, но со временем команда ProctorEdu добилась стабильной работы и вывела это решение в продакшн.

Получилось быстро и компактно, но через какое-то время Сколтех пожаловался, что система не видит некоторых студентов. Оказалось, что курсы этого института проходит много чернокожих ребят, которые подключаются прямо из Африки, и алгоритм действительно не всегда их замечает.

За время обучения нейронка видела достаточно людей разных рас и возрастов, никто не ожидал возникновения такой проблемы. В конце концов выяснилось, что сетка здесь ни при чем, а дело в засветке. Африка просто слишком солнечная. 

Если за спиной студента окно, или он сидит на ярком солнце в белой с иголочки рубашке, камера выставляет экспозицию по самому светлому участку изображения. Черты лица затемняются, сливаются, и алгоритму не с чем работать. Пришлось добавить рекомендации по освещению в инструкцию для участников экзамена.

Сейчас разработчики планируют перенести в браузер и алгоритм распознавания лиц. Пока что модель великовата (20—30 Мбайт с учетом сжатия), это в то время как все SDK весит около 1 мегабайта. Но здесь стоит постараться и найти решение.

Когда все изображения будут распознаваться в браузере, расходы на хостинг сократятся на добрых 30%. К тому же, на сервер будут передаваться только дескрипторы, по которым нельзя восстановить оригинальное изображение, а фото и документы так и останутся на компьютерах пользователей.

Серверная часть ProctorEdu

Кстати, об архитектуре системы.

Основной компонент ProctorEdu — сервер приложений. Он работает на Node.js и занимается обработкой веб-запросов и веб-сокетных соединений. Сервер приложений связан с базой MongoDB. Там хранятся все данные, не являющиеся бинарными объектами. Для файлов, изображений, записей экзаменов предусмотрено отдельное S3-совместимое объектное хранилище.

Архитектура ProctorEdu включает отдельный сервис под API распознавания лиц и документов, и TURN-сервер для координации WebRTC-подключений между компьютерами участников.

Раньше для видеосвязи использовался медиасервер, через который проходили видеопотоки всех клиентов. Но разработчики быстро поняли, как тяжело приходится онлайн-кинотеатрам: то соединения отваливаются, то данные не передаются, то память переполняется — вечно какие-то сложно диагностируемые проблемы. Когда они перешли на p2p архитектуру, проблемы решились сами собой.

Вся система поддерживает горизонтальное масштабирование. Ее компоненты упакованы в контейнеры. Их можно разбросать по разным физическим серверам и собрать кластерную конфигурацию в режиме мастер-мастер. Тогда нагрузка будет распределяться равномерно.

Обычно ProctorEdu разворачивают на базе одного из российских хостингов, поддерживающих хранение персональных данных, но систему можно запустить и на локальном сервере, как в проекте с МГУ и КРОК. 

Требования к железу невысокие: компьютер с восьмиядерным процессором и 8 ГБ оперативной памяти потянет порядка 500 одновременных сессий. Однажды ProctorEdu обслуживала больше 5 тыс. одновременных участников экзамена и понадобилось всего 6 серверов для обработки клиентских запросов.

Можно ли обмануть систему?

Можно, но не так, как это обычно пытаются сделать.

В торговых сетях, где используют ProctorEdu, часто бывает так, что один сотрудник пытается пройти тесты за весь магазин. Порой пользователи подменяют видео с камеры на какую-нибудь видеотрансляцию. Так, однажды разработчики наблюдали, как тесты по технике безопасности на предприятии проходила известная порноактриса.

Был случай, когда один из участников подготовился особенно серьезно: напечатал чужое фото на листе А4, вырезал глаза, привязал резинку и использовал как маску.

Конечно, это все легко детектируется.

Раньше можно было поставить смартфон перед монитором так, что его не было видно с фронтальной камеры. Казалось, что участник постоянно смотрит только на монитор. Теперь ProctorEdu обеспечивает и боковой обзор. К системе подключается вторая камера или тот же смартфон.

Еще можно попробовать списывать при помощи удаленного рабочего стола или виртуальной машины. Отследить их с вкладки браузера практически невозможно. Чтобы закрыть эту возможность, в систему добавили интеграцию с Safe Exam Browser.

Это браузер с открытым исходным кодом, который блокирует компьютер на время экзамена. Он не позволяет использовать удаленный рабочий стол, посторонние программы, а также распознает виртуальные машины. 

Конечно, и это не панацея. Если постараться, Safe Exam Browser можно обмануть. Еще можно раздобыть скрытые наушники или аппаратный сплиттер для мониторов. Любой алгоритм можно обойти, вопрос лишь в том, сколько усилий для этого потребуется. ProctorEdu делает так, чтобы было проще выучить, чем смухлевать. И наши клиенты подтверждают, что система успешно справляется с этой задачей.