어떤 사람들은 가상 머신을 사용했고, 어떤 사람들은 직접 전화를 걸었고, 사기꾼 6명은 무사히 탈출했습니다! 온라인 감독 소프트웨어는 단지 장식에 불과합니까?-일체 포함-php.cn

어떤 사람들은 가상 머신을 사용했고, 어떤 사람들은 직접 전화를 걸었고, 사기꾼 6명은 무사히 탈출했습니다! 온라인 감독 소프트웨어는 단지 장식에 불과합니까?

제작자: 빅데이터다이제스트

저자: Caleb

부정행위에 관한 한 높은 수준의 지식과 높은 수준의 마법을 가진 사람의 전형적인 예라고 할 수 있습니다.

2017년 영화 '건슬링거'는 '흔해 보이는' 학생의 부정 행위에 대한 새로운 반전을 선보였습니다. 일부 네티즌은 "부정은 학생 시절의 주제입니다"라고 말하기도 했습니다.

이전에는 전염병과 같은 여러 요인의 영향을 받아 전 세계의 온라인 시험도 강제로 의제에 올랐으며 다양한 부정 행위 방지 조치가 밀접하게 이어졌습니다.

그런데 시간이 지나도 이러한 치트 방지 소프트웨어가 실제로 제 역할을 할 수 있을까요?

최근 조사에 따르면 전 세계 학교에서 사용하는 부정 행위 방지 소프트웨어인 Proctorio는 매우 높은 신뢰도를 가지고 있다고 주장함에도 불구하고 환경에서 부정 행위를 탐지하는 데 효과적이지 않은 것으로 나타났습니다.

연구 논문: https://ris.utwente.nl/ws/portalfiles/portal/275927505/3e2a9e5b2fad237a3d35f36fa2c5f44552f2.pdf

네덜란드 트벤테 대학의 한 연구원이 아주 생생한 비유를 했습니다. 그 소프트웨어는 위약을 복용하는 것과 같습니다. 작동하기 때문이 아니라 사람들이 작동하거나 작동할 수 있다고 믿기 때문에 긍정적인 효과가 있습니다.

Proctorio는 얼마나 신뢰할 수 없는가요?

그 전에 우리는 Proctorio를 이해해야 합니다.

AI 시스템으로서 인정해야 할 한 가지는 Proctorio가 감독관의 인력을 해방하는 대신 주로 소프트웨어를 사용하여 시험 중 학생을 모니터링하고 의심스러운 행동을 감지하고 보고한다는 것입니다.

이를 위해서는 학생들의 눈 움직임과 신체 언어를 더 잘 추적하기 위해 학생들이 컴퓨터에 브라우저 확장 프로그램이나 앱을 설치해야 합니다. 학생들은 또한 시스템이 얼굴 인식을 더 잘 수행할 수 있도록 학생 사진과 신분증을 업로드해야 합니다.

한편, Proctorio는 주로 학생들의 컴퓨터의 비디오 및 오디오 클립을 녹화하고, 학생들의 키 입력을 캡처하고, 컴퓨터 화면 데이터를 기록하고, 학생들이 머리, 눈 또는 신체를 움직일 때 표시하고 시험을 볼 때 액세스하는 웹사이트입니다. 감독을 위해 분류 등이 있습니다.

이 연구는 소프트웨어가 효과적인지 입증하기 위해 2021년 4월 제13차 컴퓨터 지원 교육 국제 컨퍼런스에서 처음 발표되었습니다.

이를 위해 연구원들은 대학의 컴퓨터 과학 과정에서 30명의 학생 자원 봉사자를 찾아 그 중 6명이 Proctorio가 감독하는 시험에서 부정행위를 하도록 했고, 다른 5명에게는 부정행위를 하지 말고 의심스럽게 행동하라는 지시를 받았으며 나머지는 시험을 치릅니다. 시험은 솔직히.

부정 행위 방법에 대해 연구원들은 학생들에게 이를 바로 돌려주어 학생들이 시스템을 부정하는 가장 좋은 방법을 결정할 수 있도록 했습니다.

결과에 따르면 Proctorio는 부정 행위자를 탐지하는 데 그다지 능숙하지 않으며 시스템에서는 부정 행위자를 부정 행위자로 표시하지 않았습니다.

누군가 가상 머신을 사용하고 있으며 이는 Proctorio 시스템의 알려진 취약점입니다. 소프트웨어는 이 학생들을 "위반"으로 표시했지만, 동일한 위반으로 다른 정직한 학생들도 표시했다고 연구는 썼습니다. 한편 일부 사기꾼은 음성 통화를 사용했지만 Proctorio는 해당 오디오를 변칙적이라고 표시하지 않았지만 시끄러운 환경에서 시험을 치르는 학생들의 오디오를 표시했습니다.

데이터와 영상을 독립적으로 검토한 결과 사기꾼 6명 중 단 한 명만 발견되었습니다. 이는 주로 카메라 각도와 선택적인 "룸 스캔" 기능으로 인해 학생의 가슴 아래에 무엇이 있는지 정확히 알 수 없었기 때문입니다. 그리고 학생들의 행동.

Proctorio의 대변인인 David Lux는 "다학제적이며 보다 강력한 표본 크기를 가진" "온라인 감독의 효율성"에 대한 세 가지 추가 연구를 소개했습니다. 저자들은 트벤테 대학의 연구에 결함이 있음을 인정합니다. 그러나 이 세 가지 연구 중 어느 것도 대조 실험이 아니었습니다. 대신 그들은 설문조사나 회귀 모델을 사용하여 부정 행위율과 온라인 감독에 대한 학생의 태도를 추정합니다.

이러한 연구는 연구 설계가 다를 뿐만 아니라 근본적으로 다른 질문을 다루기도 합니다. 결국, 온라인 감독 소프트웨어가 사기꾼을 잡는 데 효과적인지 여부를 증명하려는 시도는 없었습니다.

칭화대학교 AI 이글아이 시스템 출시

프록토리오 외에도 국내 온라인 감독 기술도 꾸준히 따라잡고 있다.

올해 3월 칭화대학교는 사전에 앱을 다운로드하지 않고도 얼굴 이탈, 시선 혐오 등 비정상적인 상황을 감지해 경고를 발령할 수 있는 'AI 이글아이' 디지털 감독 및 부정행위 방지 시스템을 개발했다. 내년부터 사용될 예정이다.

Tsinghua University 교육 개발 센터 소장 Zhou Xiuzhuan은 AI Eagle Eye 디지털 감독 시스템이 현재 사전에 소프트웨어를 다운로드할 필요가 없는 유일한 시스템이며 후보자가 컴퓨터 제어권을 넘겨줄 필요가 없다고 말했습니다. 휴대폰 응답 지원, 모든 브라우저 지원, 적용 가능 100명 이상의 대규모 수업의 시험 감독을 위한 사기 방지 시스템입니다.

AI Eagle Eye 디지털 감독 시스템의 핵심은 얼굴 인식 및 시선 추적 기술을 적용하여 일반 가정용 컴퓨터 또는 휴대폰 렌즈의 비디오 렌즈에 눈의 궤적을 스캔하는 기능이 있습니다. AI 인공지능 딥러닝 시스템은 응시자의 부정행위 여부를 정확하게 판별한다.

이와 관련하여 AI Eagle Eye 시스템은 부정 행위를 "얼굴 일탈", "얼굴 멀리", "눈 멀게", "오픈 페이징" 등 4가지 유형의 이상 현상으로 분류하고 그 수를 계산합니다. 응시자 및 감독관에게 주의를 환기시키기 위한 예외 사항이 있는 경우, 감독관은 응시자에게 통화 기능을 켜서 현장 상황을 파악하도록 요청할 수도 있습니다.

칭화대학교는 AI Eagle Eye 시스템이 올해 소규모로 시범 운영되어 더 많은 샘플과 데이터를 수집하고, 시스템의 정확성을 지속적으로 개선 및 개선하여 공식적으로 사용하는 것을 목표로 한다고 밝혔습니다. 내년에요.

온라인 감독은 어떻게 해야 하나요?

실제로 중국에서는 이미 온라인 감독이 시행되고 있습니다.

올해 5월, 베이징 펑타이구 중학교 '원모델' 시험이 온라인과 오프라인을 병행해 진행됐다.

첫 번째는 시험 환경에 대한 요구 사항입니다. 온라인 시험에 참여하는 학생은 학생 앞에 노트북이 있고 학생 뒤에 45도 휴대폰이 있는지 확인해야 합니다. 두 장치의 카메라는 학생의 답변 상태를 다양한 각도에서 캡처합니다. 감독관의 관점은 전체 모니터링에 대해 완전하고 명확합니다.

베이징 Zhao Dengyu School 교장 Shen Lei는 각 시험장에 감독관이 있을 뿐만 아니라 학교 간부, 학년 리더, 담임 교사 모두가 온라인으로 시험장에 입장하여 검사를 실시했다고 말했습니다. “회의마다 학생들의 카메라 각도가 표준화되었는지, 각 학생이 질문에 진지하게 답변하는지 확인하기 위해 최소 5~6번의 검사가 있습니다.”

"One Model" 시험 첫날 이후 학교에서는 이번 온라인 감시에 대한 몇 가지 최적화 계획도 제시했습니다. 예를 들어, 하나의 화면이 모든 후보자의 실시간 현황을 완벽하게 표시할 수 없으며 페이지를 넘겨야 합니다. 이에 대해 펑타이 제2중학교는 최적화를 제안했다. 감독관 외에 담임 선생님도 현장에 입장했고, 두 개의 장치를 사용해 동시에 시험을 감독해 모든 학생들의 답변이 가능하도록 했다. 한눈에 볼 수 있습니다.