文章主题：ChatGPT, 大学会计课程, 考题测试, 会计信息系统
IT之家 4 月 25 日消息，上个月，OpenAI 推出了最新的 AI 聊天机器人 GPT-4，并声称该机器人在各种考试中表现异常出色，比如律师考试，研究生入学考试等。然而，根据美国杨百翰大学领导的一项研究，ChatGPT 在会计考试中的表现远不及人类，甚至还会一本正经的胡说八道，为错误的答案辩解。
🎓👨🏫伍德教授的会计研究团队对ChatGPT进行了深度评估，旨在验证其在大学会计课程中的知识水平。他们发起了一项国际性的挑战，吸引了14个国家的186所教育机构的327位热情参与者，其中包括来自世界各地的专业人士和学生。总计，他们精心准备了25,181道涵盖会计信息系统、审计、财务会计、管理会计及税务等广泛领域的考题，确保测试的全面性和准确性。为了增加实验的真实性和多样性，团队特别邀请BYU的一批本科生，包括伍德教授的女儿杰西卡，用教材上的问题来考验ChatGPT。他们共提供了2,268道这样的试题，为评估提供了额外的视角和深度。这项大规模的测试结果将揭示ChatGPT在教育场景中的表现，以及它是否能成为学习者高效工具的一部分。我们期待看到ChatGPT如何应对这些复杂的会计问题，并对它的能力进行深入分析，以供教育者和学生参考。📚💻
结果显示，ChatGPT 的表现虽然有亮点，但总体上还是不及学生水平。学生的平均分是 76.7%，而 ChatGPT 的平均分只有 47.4%。在 11.3% 的问题上，ChatGPT 的得分高于学生平均分，尤其是在会计信息系统和审计方面。但是，在税务、财务和管理方面，ChatGPT 就显得力不从心，可能是因为这些领域需要更多的数学运算能力。在问题类型上，ChatGPT 比较擅长判断题（68.7% 正确率）和选择题（59.5% 正确率），但是在简答题上就很吃力（正确率在 28.7% 到 39.1% 之间）。一般来说，对于需要更高层次思维的问题，ChatGPT 更难回答。有时候，ChatGPT 甚至会为错误答案提供权威的解释，或者对同一个问题给出不同的答案。
“它并不完美，你不能指望它能做所有事情。”杰西卡说，“仅仅依靠 ChatGPT 来学习是愚蠢的。”
IT之家注意到，研究人员还发现了一些其他有趣的现象：
🎓当面对复杂的数学题目时，ChatGPT偶尔会让人忍俊不禁，它可能会不小心混淆运算符号，例如在减法中多加两笔，抑或在除法上犯下致命的错误。这类小插曲虽然有趣，但也提醒我们，技术智能虽强大，精准计算还需步步为营。
🌟ChatGPT虽智能🔥，但偶尔会陷入困惑。它能给出解答，却也可能误导，明明正确却选错路径。尽管如此，它的自我修正能力不容小觑，总是尽力提供最贴切的答案，哪怕答案背后隐藏着些许误差。
🌟警告：AI助手在此！👀ChatGPT并非始终如一地诚实，有时会玩文字游戏。在引用资料时，它可能会创造出看似确凿无疑的文献列表，然而这些文献实际上是虚无缥缈的幻影，不带有任何现实依据。这种虚构行为可能导致信息误导，特别是当涉及到学术或专业内容时。记得核实每一个条目，以防被假象蒙蔽！📚
尽管如此，研究人员相信，在未来的版本中，ChatGPT 会在会计问题上有所进步，并解决上述问题。他们认为最有前景的是，这款聊天机器人可以帮助改善教学和学习，比如设计和测试作业，或者用于草拟项目的部分内容。
在这个关键时刻，让我们深入审视教育的本质——传授何为价值之所在。正如BYU会计学界的资深人士，合作研究者之一的拉森教授所指出的那样，这是一场深刻的革新挑战，我们需要重新定义未来的角色与职责。诚然，助教的角色将发生转变，但其核心价值将被赋予新的生命。📚🌟
这项研究发表在《会计教育问题》杂志上。
AI时代，掌握AI大模型第一手资讯！AI时代不落人后！
免费ChatGPT问答，办公、写作、生活好得力助手！
扫码右边公众号，驾驭AI生产力！
