Menschen haben immer noch finanzielle Macht: Studie zeigt, dass ChatGPT bei Buchhaltungsprüfungen schlechter abschneidet als College-Studenten

ChatGPT schneidet bei Buchhaltungsprüfungen weitaus schlechter ab als Menschen und redet sogar ernsthaften Unsinn, um falsche Antworten zu rechtfertigen.

Wood, ein Buchhaltungsprofessor an der Brigham Young University in den Vereinigten Staaten, und sein Team beschlossen, ChatGPT auf die Probe zu stellen, um zu sehen, ob es Fragen aus Buchhaltungskursen an Hochschulen beantworten kann. Sie starteten einen Aufruf in den sozialen Medien, an dem 327 Mitarbeiter aus 186 Bildungseinrichtungen in 14 Ländern teilnahmen. Sie stellen insgesamt 25.181 Prüfungsfragen zur Buchhaltung bereit und decken Bereiche wie Buchhaltungsinformationssysteme, Wirtschaftsprüfung, Finanzbuchhaltung, Managementbuchhaltung und Steuern ab. Sie luden außerdem BYU-Studenten, darunter Woods Tochter Jessica, ein, 2.268 Lehrbuchprüfungsfragen in ChatGPT einzugeben.

Die Ergebnisse zeigen, dass die Leistung von ChatGPT zwar Lichtblicke aufweist, im Allgemeinen jedoch nicht so gut ist wie das Niveau der Schüler. Der durchschnittliche Studenten-Score lag bei 76,7 %, während der durchschnittliche ChatGPT-Score nur 47,4 % betrug. Bei 11,3 % der Fragen schnitt ChatGPT besser ab als der Studentendurchschnitt, insbesondere in den Bereichen Buchhaltungsinformationssysteme und Wirtschaftsprüfung. Allerdings ist ChatGPT in den Bereichen Steuern, Finanzen und Management unzureichend, wahrscheinlich weil diese Bereiche mehr Mathematikkenntnisse erfordern. In Bezug auf die Fragetypen schneidet ChatGPT besser bei Richtig-Falsch-Fragen (68,7 % Richtigkeitsquote) und Multiple-Choice-Fragen (59,5 % Richtigkeitsquote) ab, hat jedoch Probleme mit Fragen mit kurzen Antworten (Richtigkeitsquote zwischen 28,7 % und 39,1 %). Im Allgemeinen sind Fragen, die ein übergeordnetes Denken erfordern, für ChatGPT schwieriger zu beantworten. Manchmal liefert ChatGPT sogar verlässliche Erklärungen für falsche Antworten oder gibt unterschiedliche Antworten auf dieselbe Frage.

„Es ist nicht perfekt, man kann nicht erwarten, dass es alles kann.“ Jessica sagte: „Es ist dumm, sich beim Lernen nur auf ChatGPT zu verlassen.“ Allen ist aufgefallen, dass die Forscher auch einige andere interessante Phänomene entdeckt haben:

• ChatGPT liefert häufig Erklärungen für seine Antworten, auch wenn diese falsch sind. Manchmal ist die Beschreibung von ChatGPT korrekt, es wird jedoch die falsche Option ausgewählt.
• ChatGPT erfindet manchmal Dinge. Wenn Sie beispielsweise eine Referenz angeben, wird eine Referenz generiert, die real aussieht, in Wirklichkeit aber völlig fiktiv ist und manchmal sogar der Autor nicht existiert.
• Dennoch glauben die Forscher, dass ChatGPT in zukünftigen Versionen Verbesserungen bei Buchhaltungsproblemen vornehmen und die oben genannten Probleme lösen wird. Am vielversprechendsten sehen sie darin, dass der Chatbot dazu beitragen kann, das Lehren und Lernen zu verbessern, etwa beim Entwerfen und Testen von Aufgaben oder beim Entwurf von Teilen von Projekten.

„Dies ist eine Gelegenheit, darüber nachzudenken und zu sehen, ob wir wertvolle Informationen vermitteln“, sagte Larson, ein Buchhaltungsprofessor an der BYU und einer der Co-Autoren der Studie. Wir müssen bewerten, was Das machen wir als nächstes. Natürlich werde ich weiterhin Lehrassistenten haben, aber der Inhalt ihrer Arbeit wird anders sein.

Das obige ist der detaillierte Inhalt vonMenschen haben immer noch finanzielle Macht: Studie zeigt, dass ChatGPT bei Buchhaltungsprüfungen schlechter abschneidet als College-Studenten. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!