Einige Leute nutzten virtuelle Maschinen, andere führten direkte Telefonanrufe und sechs Betrüger kamen unversehrt davon! Ist die Online-Überwachungssoftware nur Dekoration?

​Produziert von Big Data Digest

Autor: Caleb

Wenn es um Betrug geht, kann man sagen, dass es sich um ein typisches Beispiel für jemanden handelt, der über ein hohes Maß an Wissen und ein hohes Maß an Magie verfügt.

Der Film „The Gunslinger“ aus dem Jahr 2017 zeigte eine neue Variante des scheinbar „üblichen“ Betrugsverhaltens von Studenten. Einige Internetnutzer sagten sogar: „Betrug ist das Thema der Studentenzeit.“

Früher von vielen Faktoren wie der Epidemie betroffen, mussten auch Online-Prüfungen auf der ganzen Welt zwangsweise auf die Tagesordnung gesetzt werden, dicht gefolgt von verschiedenen Anti-Cheating-Maßnahmen.

Aber spielen diese Anti-Cheat-Software nach all der Zeit wirklich die Rolle, die sie sollten?

Eine kürzlich durchgeführte Untersuchung ergab, dass Proctorio, die von Schulen auf der ganzen Welt verwendete Anti-Cheating-Software, Betrüger in der Umgebung nicht effektiv erkennt, obwohl sie angeblich ein sehr hohes Maß an Vertrauen darin haben.

Research Paper: https://ris.utwente.nl/ws/portalfiles/portal/275927505/3e2a9e5b2fad237a3d35f36fa2c5f4452f2.pdf

a -Forscher aus der Universität von zwei Jahren Software ist wie die Einnahme eines Placebos: Sie hat eine positive Wirkung, nicht weil sie funktioniert, sondern weil die Leute glauben, dass sie funktioniert oder dass sie funktionieren könnte.

Wie unzuverlässig ist Proctorio?

Davor müssen wir Proctorio noch verstehen.

Als KI-System muss man zugeben, dass Proctorio die personellen Ressourcen der Aufsichtspersonen freisetzt. Stattdessen nutzt es hauptsächlich Software, um Schüler zu überwachen und verdächtiges Verhalten während der Prüfung zu erkennen.

Dazu müssen Schüler eine Browsererweiterung oder eine App auf ihren Computern installieren, um die Augenbewegungen und Körpersprache der Schüler besser verfolgen zu können. Studierende müssen außerdem ihr Studierendenfoto und ihren Personalausweis hochladen, damit das System die Gesichtserkennung besser durchführen kann.

Andererseits zeichnet Proctorio hauptsächlich Video- und Audioclips von den Computern der Schüler auf, erfasst die Tastatureingaben der Schüler, zeichnet Computerbildschirmdaten auf, markiert, wenn Schüler ihre Köpfe, Augen oder Körper bewegen, und greift darauf zu, wenn sie Prüfungen ablegen klassifiziert und so weiter für die Aufsicht.

Im April 2021 wurde diese Forschung erstmals auf der 13. Internationalen Konferenz für computergestützte Bildung vorgestellt, um zu beweisen, ob die Software wirksam ist.

Zu diesem Zweck fanden die Forscher 30 studentische Freiwillige eines Informatikkurses an der Universität und ließen sechs von ihnen bei einer von Proctorio beaufsichtigten Prüfung schummeln, und fünf anderen wurde gesagt, sie sollten nicht schummeln, sondern sich verdächtig verhalten, und der Rest nahm die Prüfung ab Prüfung ehrlich.

Was das Betrügen angeht, gaben die Forscher den Schülern dieses Recht zurück, sodass sie entscheiden konnten, wie sie das System am besten betrügen können.

Den Ergebnissen nach zu urteilen ist Proctorio nicht sehr gut darin, Betrüger zu erkennen, und das System hat keinen Betrüger als Betrüger gekennzeichnet.

Jemand verwendet eine virtuelle Maschine und dies ist eine bekannte Schwachstelle im Proctorio-System. Die Software habe diese Schüler zwar als „Verstöße“ gekennzeichnet, aber auch andere ehrliche Schüler wegen der gleichen Verstöße, heißt es in der Studie. Mittlerweile nutzten einige Betrüger Audioanrufe, aber Proctorio hat ihre Audiodaten nicht als anomal gekennzeichnet, wohl aber die Audiodaten von Schülern, die Tests in lauten Umgebungen absolvieren.

Eine unabhängige manuelle Überprüfung der Daten und des Filmmaterials ergab nur einen der sechs Betrüger, hauptsächlich weil sie aufgrund des Kamerawinkels und der optionalen „Raumscan“-Funktion keine Möglichkeit hatten, genau zu wissen, was sich unter der Brust des Schülers befand. und das Verhalten der Schüler.

David Lux, ein Sprecher von Proctorio, stellte drei zusätzliche Studien zur „Wirksamkeit von Online-Überwachung“ vor, die „multidisziplinär waren und robustere Stichprobengrößen hatten“. Die Autoren räumen ein, dass die Studie der Universität Twente Mängel aufweist. Allerdings handelte es sich bei keiner dieser drei Studien um kontrollierte Experimente. Stattdessen verwenden sie entweder Umfragen oder Regressionsmodelle, um die Betrugsraten und die Einstellung der Studierenden zur Online-Überwachung abzuschätzen.

Bei diesen Studien handelt es sich nicht nur um unterschiedliche Forschungsdesigns, sondern sie befassen sich auch mit grundlegend unterschiedlichen Fragen. Schließlich hat keine von ihnen versucht zu beweisen, ob Online-Überwachungssoftware bei der Ergreifung von Betrügern wirksam ist.

Die Tsinghua-Universität führt das AI Eagle Eye-System ein

Neben Proctorio wird auch die inländische Online-Überwachungstechnologie stetig weiterentwickelt.

Im März dieses Jahres entwickelte die Tsinghua-Universität das digitale Überwachungs- und Anti-Cheating-System „AI Eagle Eye“, das ungewöhnliche Situationen wie Gesichtsabweichung und Blickaversion erkennen und Warnungen ausgeben kann, ohne dass vorher eine APP heruntergeladen werden muss voraussichtlich ab nächstem Jahr zum Einsatz kommen.

Zhou Xiuzhuan, Direktor des Lehrentwicklungszentrums der Tsinghua-Universität, sagte, dass das digitale Überwachungssystem AI Eagle Eye derzeit das einzige ist, bei dem keine Software im Voraus heruntergeladen werden muss und Kandidaten keine Computersteuerung abgeben müssen. unterstützt die Beantwortung von Mobiltelefonen, unterstützt alle Browser und ist anwendbar. Ein Betrugsbekämpfungssystem zur Überwachung von Prüfungen in großen Klassen mit mehr als 100 Personen.

Der Kern des digitalen Überwachungssystems AI Eagle Eye ist die Anwendung von Gesichtserkennungs- und Eye-Tracking-Technologie, sodass das Videoobjektiv eines gewöhnlichen Heimcomputers oder eines Mobiltelefonobjektivs die Funktion hat, die Flugbahn des Auges zu scannen Blick und kombiniert Mausflugbahn, Audio usw. Das Deep-Learning-System der KI mit künstlicher Intelligenz bestimmt genau, ob Kandidaten betrogen haben.

In diesem Zusammenhang klassifiziert das KI-Eagle-Eye-System das Betrugsverhalten in vier Arten abnormaler Phänomene wie „Gesichtsverschiebung“, „Gesicht weg“, „Augen weg“ und „offenes Paging“ und zählt die Anzahl Bei Ausnahmen, um Kandidaten und Aufsichtspersonen daran zu erinnern, aufmerksam zu sein, kann die Aufsichtsperson die Kandidaten auch bitten, die Anruffunktion einzuschalten, um die Situation vor Ort zu ermitteln.

Die Tsinghua-Universität gab an, dass das KI-System Eagle Eye in diesem Jahr in kleinem Maßstab getestet wird, um mehr Proben und Daten zu sammeln, die Genauigkeit des Systems weiter zu verbessern und zu verbessern und eine offizielle Nutzung anzustreben es nächstes Jahr.

Was muss ich für die Online-Überwachung tun?

​Tatsächlich wird in China bereits Online-Proctoring praktiziert.

Im Mai dieses Jahres wurde die „One Model“-Prüfung für Mittelschulen im Bezirk Fengtai, Peking, mit einer Kombination aus Online- und Offline-Methoden durchgeführt.

Das erste ist die Anforderung an die Prüfungsumgebung. Studierende, die an der Online-Prüfung teilnehmen, müssen sicherstellen, dass der Desktop frei ist. Vor dem Studierenden steht ein Laptop und hinter dem Studierenden befindet sich ein Mobiltelefon. Um dies sicherzustellen, erfassen die Kameras der beiden Geräte den Antwortstatus des Studierenden Die Perspektive der Aufsichtsperson ist vollständig und klar für eine vollständige Überwachung.

Shen Lei, der akademische Direktor der Zhao-Dengyu-Schule in Peking, sagte, dass zusätzlich zu einem Aufsichtsbeamten in jedem Prüfungsraum auch Schullehrer, Klassenleiter und Klassenlehrer den Prüfungsraum online betraten, um Inspektionen durchzuführen. Bei jedem Treffen gibt es mindestens 5 bis 6 Inspektionen, um zu überprüfen, ob die Kamerawinkel der Schüler standardisiert sind und ob es jedem Schüler ernst ist, Fragen zu beantworten.“

Nach dem ersten Tag der „One Model“-Prüfung legte die Schule auch einige Optimierungspläne für diese Online-Beaufsichtigung vor. Beispielsweise kann ein Bildschirm nicht den Echtzeitstatus aller Kandidaten vollständig anzeigen und es müssen Seiten umgeblättert werden. In diesem Zusammenhang schlug die Fengtai No. 2 Middle School eine Optimierung vor: Zusätzlich zur Aufsichtsperson betrat auch der Klassenlehrer den Veranstaltungsort und zwei Geräte wurden verwendet, um die Prüfung gleichzeitig zu beaufsichtigen, sodass die Antworten aller Schüler berücksichtigt werden konnten auf einen Blick erkennbar.

Die meisten aktuellen Online-Überwachungssysteme stimmen mehr oder weniger mit dem Kernpunkt der Studie der Universität Twente überein, das heißt, dass die Software empfindlich auf einige übermäßig offensichtliche Betrugsverhaltensweisen reagiert, wie zum Beispiel darauf, dass Studenten gemeinsam Prüfungen ablegen und Sie in Echtzeit zu besprechen, hat eine abschreckende Wirkung.

Aber schließlich gibt die Schule möglicherweise viel Geld für das Aufsichtssystem für jede Prüfung aus, und es besteht auch die Gefahr, dass die Privatsphäre der Schüler gefährdet wird. Mit anderen Worten, sollte es einem Prüfer gestattet sein, die Prüfung durchzuführen, während alle eingeschaltet sind ihre Kameras? Es scheint, dass einige Variablen hinzugefügt wurden.

Das obige ist der detaillierte Inhalt vonEinige Leute nutzten virtuelle Maschinen, andere führten direkte Telefonanrufe und sechs Betrüger kamen unversehrt davon! Ist die Online-Überwachungssoftware nur Dekoration?. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!