ChatGPT的错误表明,它还不能取代金融专业人士

【字体: 时间:2024年12月18日 来源:AAAS

编辑推荐:

  费尔赫斯特说:“让一群人担任初级分析师,让他们竞争,留下优胜者,这种做法的成本要高得多。”“所以这可能意味着这类工作的低迷,但这并不是因为ChatGPT比分析师更好,而是因为我们一直在要求初级分析师做一些更卑微的任务。”

  

铂尔曼,洗。虽然像ChatGPT这样的大型语言模型在金融执照考试中选择多项选择答案时表现不错,但在处理更微妙的任务时却表现不佳。

华盛顿州立大学领导的一项研究分析了人工智能语言模型BARD、Llama和ChatGPT对金融考试问题的一万多个回答。

研究人员要求这些模型不仅要选择答案,还要解释答案背后的原因,然后将这些文本答案与人类专业人士的答案进行比较。虽然两个版本的ChatGPT在这些任务中表现最好,但它们在更高级的主题上仍然表现出高度的不准确性。

研究报告的作者、华盛顿州立大学卡森商学院的DJ费尔赫斯特说:“现在担心ChatGPT会完全抢走金融工作还为时过早。”“对于广泛的概念,在互联网上已经有很好的解释很长一段时间,ChatGPT可以很好地综合这些概念。如果这是一个特定的、特殊的问题,它真的会很困难。”

在这项发表在《金融分析师杂志》上的研究中,费尔赫斯特和克莱姆森大学的合著者丹尼尔·格林使用了执照考试中的问题,包括证券业基本知识考试以及系列6、7、65和66。

为了超越人工智能模型简单选择正确答案的能力,研究人员要求模型提供书面解释。他们还根据金融专业人士可能实际执行的特定工作任务选择了问题。

“仅仅通过认证考试是不够的。我们真的需要深入挖掘这些模型真正能做什么,”费尔赫斯特说。

在所有模型中,付费版本的ChatGPT 4.0表现最好,提供的答案与人类专家最相似。它的准确率也比其他模型高出18到28个百分点。然而,当研究人员对早期的免费版本ChatGPT 3.5进行微调时,情况发生了变化,他们给它提供了正确回答和解释的例子。经过这次调整,它在准确度上接近ChatGPT 4.0,甚至在提供与人类专业人员相似的答案方面超过了它。

然而,当涉及到某些类型的问题时,这两种模型仍然不足。虽然它们在审查证券交易和监测金融市场趋势方面做得很好,但在确定客户保险范围和税收状况等特殊情况下,这些模型给出的答案更不准确。

费尔赫斯特和格林,以及华盛顿州立大学的博士生亚当·博兹曼,目前正在研究其他方法,以确定ChatGPT在评估潜在并购交易的项目中可以做什么,不能做什么。为此,他们正在利用ChatGPT在2021年9月之前的数据进行训练,并使用在该日期之后达成的结果已知的交易。初步研究结果显示,到目前为止,人工智能模型并不擅长这项任务。

总的来说,研究人员表示,ChatGPT可能仍然是一种更好的辅助工具,而不是取代现有的金融专业人士。另一方面,人工智能可能会改变一些投行聘用初级分析师的方式。

费尔赫斯特说:“让一群人担任初级分析师,让他们竞争,留下优胜者,这种做法的成本要高得多。”“所以这可能意味着这类工作的低迷,但这并不是因为ChatGPT比分析师更好,而是因为我们一直在要求初级分析师做一些更卑微的任务。”


杂志

金融分析师杂志

文章标题

ChatGPT对金融了解多少?

文章发表日期

11月18 - - 2024

相关新闻
生物通微信公众号
微信
新浪微博
  • 搜索
  • 国际
  • 国内
  • 人物
  • 产业
  • 热点
  • 科普

热搜:chatgpt,证券|

  • 急聘职位
  • 高薪职位

知名企业招聘

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号