研究:AI模型回答财务问题出错率高 表现最优的是这款

2026-09-19 17:00 阅读 11 评论 0

研究发现,AI模型回答财务问题的出错率高,但Claude Opus 5「推论」模式表现最佳。(路透) 许多人有财务问题时,爱求助于人工智能(AI)机器人。但研究发现,市面上的AI模型回财务相关问题时,出错率极高。 这项研…
研究:AI模型回答财务问题出错率高 表现最优的是这款

研究发现,AI模型回答财务问题的出错率高,但Claude Opus 5「推论」模式表现最佳。(路透)

许多人有财务问题时,爱求助于人工智能(AI)机器人。但研究发现,市面上的AI模型回财务相关问题时,出错率极高。

这项研究用超过100个钱财相关问题,来考验免费版及付费版AI模型,受测的模型包括:ChatGPT、Claude、Copilot和Gemini。问题最多重复五遍,对18种不同的AI模型总共问了超过1万个问题。

结果发现,AI模型的答复充斥着错误,包括计算错了、未考量将实施的税法规定改变,或AI自己幻想出规则。

最糟的是倚赖AI回答税务问题恐致严重的财务损失。Saturn首席执行官乔利说:「数百万人现在靠AI模型提供财务建议,但得到的却是错误答案,可能造成金钱损失。」

例如,去年推出的免费版AI模型Claude Haiku 4.5,因为弄错退休金税法规定,害英国一名退休金储户面临得补缴17,500英镑税金给国税局。另一例是,被问到学生贷款问题时,Claude竟然「自创规则」,告诉某毕业生说,移居海外可停缴学贷。

研究发现,付费版AI模型给的答案比免费版正确,较新版模型的表现也比旧版好。

根据Saturn的研究,整体来说,表现最佳的模型是Claude Opus 5「推论」模式,但回答问题的出错率仍有39%。

投资平台AJ Bell个人理财主管柯尔丝表示,AI给的财务相关建议不可轻信,但聊天机器人在预算规划和数据研究方面的确很有用,例如根据某人的收入和支出,点出哪些地方可能花太多钱。

发表评论

评论|共 0 个

暂无评论,欢迎分享你的看法。

您需要登录后才可以发表言论 登录 或 立即注册

相关阅读