宾夕法尼亚州沃顿商学院的商学教授克里斯蒂安·特尔维施(Christian Terwiesch)想要推动ChatGPT,OpenAI 的智能聊天机器人,在它的壕沟里。为了测试人工智能的极限,这位学者决定对其进行管理考试。考试结束后,学生可以获得工商管理硕士(MBA)。这是一个研究生文凭,提供市场营销、财务和人力资源管理领域的就业前景。
ChatGPT 的精彩解释
商学院教授认真问了所有考试问题在 ChatGPT ……人工智能的表现还不错。根据 Christian Terwiesch 发布的报告,聊天机器人«在基本运营管理和流程分析问题(包括基于案例研究的问题)方面做出了令人难以置信的工作 »。
“不仅答案正确,而且解释也非常好””,Christian Terwiesch 在详细报告中解释道。
通过访问庞大的数据库,人工智能能够生成适当的反应,尽管有时有复杂的陈述。聊天机器人擅长聚合一组数据并生成连贯的摘要。请注意,有些问题长达数十行,并且需要高级知识。对于其中一些问题,由于详细且结构良好的答案,ChatGPT 甚至获得了满分。
令人惊讶的计算错误
同时,ChatGPT还承诺计算中的重大错误考试期间。考虑到人工智能的相关反应,沃顿商学院教授对以下结果感到惊讶:«六年级数学水平的相对简单的计算中出现令人惊讶的错误 »。乍一看,大多数数学运算似乎都是合乎逻辑且合理的。经过仔细检查,推理错误变得显而易见。
此外,聊天机器人的能力也较差«更高级的过程分析问题 »。陈述唤起«多种产品的工艺流程 »以及有关问题“需求的可变性 »给 ChatGPT 带来了问题。存在的问题更复杂的因果效应也破坏了聊天机器人的智能。
作为实验的一部分,教授冒昧地偶尔提供有关 ChatGPT 的线索,就像他在与学生进行口语考试时所做的那样。由于提供的线索,人工智能很快就审查了它的副本并纠正了它的近似值:
“如果最初未能将问题与正确的解决方法相匹配,Chat GPT3 在收到人类专家的适当提示后能够自行纠正。”
Christian Terwiesch 的观察证实了我们对 ChatGPT 的看法。在当前的迭代中,OpenAI 的聊天机器人是促进某些任务的宝贵助手,或者解开某些智力问题。然而,它还没有完全取代人类的智力。情况也是如此DesignerBot,创建 PowerPoint 的 AI在你的地方。
正如商学教授指出的那样,由于所提供的线索,人工智能能够快速发展。在需要帮助解决问题后不久,ChatGPT 立即能够生成理想的答案,无需提示。在一些交互中,聊天机器人将会进化:
“要么他能够从过去的交流中学习,要么我只是运气好。”
一次成功的考试
在分析了 ChatGPT 返回的副本后,教授告诉他荣获B级。由于这个分数,学生可以避免参加机构内通常要求的运营管理课程。尽管存在错误,聊天机器人还是表现出了对材料的充分理解。他因此通过了考试,但并没有取得惊人的成绩:
“如果学生能够在豁免考试中表现出对课程内容的掌握,我们允许他们豁免这门课程。上面报告的 Chat GPT3 性能足以通过豁免考试”。
另外,老师也玩得很开心设计考试题使用 ChatGPT。聊天机器人再次非常有效。他甚至在言论中加入了一些幽默,就像一个人一样。
尽管如此,克里斯蒂安·特尔维施还是发现了问题中的两个漏洞。由于某些未知的原因,ChatGPT 认为适合包括可有可无的轶事数据在问题中。这些不必要的元素可能会让负责寻找数学挑战解决方案的学生感到困惑。在其他情况下,人工智能忽略了关键信息。事实上,这个问题是无法回答的。在这里,行动再次需要人类智慧的监督。
Opera One - AI 驱动的网络浏览器
作者:歌剧
来源 : 沃顿商学院