上海财大发布金融领域大模型评测榜单,理财AI“蚂小财”底座模型排名第一|界面新闻,上海财大发布金融AI模型评测,理财AI蚂小财夺魁
上海财经大学发布金融领域大模型评测榜单,理财AI“蚂小财”底座模型位列第一,显示出在金融领域应用AI技术的领先地位。
随着我国“人工智能+”战略的加速推进,大模型技术在金融领域的应用正不断深入,为了全面评估金融领域大模型的专业性和可靠性,上海财经大学近日推出了国内首个金融领域大模型评估基准——FinEval 6.0,该基准在原有基础上进行了升级,新增了金融严谨性等维度,并发布了首份评测报告。
FinEval 6.0对国内外主流大模型进行了评测,结果显示,蚂蚁集团旗下的理财AI“蚂小财”在金融严谨性等维度表现突出,排名第一,超越了众多通用大模型。
公开资料显示,上海财经大学是国内最早开展金融领域大模型测评工作的高校,并在2024年参与制定了《金融大模型应用测评指南》,这是全国首个以金融业务能力为核心的团体标准,此次,上海财经大学结合对AI企业、金融机构的调研与投资者洞察,重点完善了FinEval 6.0的严谨性评测样本,从金融学术知识、金融行业理解、金融严谨性测试、金融安全认知、金融智能体应用等关键维度,全面评估大模型在复杂金融业务场景中的表现。
FinEval 6.0对国内外9款有代表性的大模型进行了评测,包括DeepSeek-R1、GPT-4o等通用基础模型,以及金融垂直领域模型,评测报告结果显示,参评模型在金融学术知识方面的表现整体优异,但在金融严谨性、金融行业理解等适配复杂场景的能力上表现各异,理财AI“蚂小财”的模型底座、蚂蚁自研Finix大模型整体表现较好,总分跑赢了通用大模型,尤其在金融严谨性上,行业均值为70.27分,蚂小财超出均值17分,显著领先。
官方数据显示,“蚂小财”是蚂蚁集团旗下的AI理财管家,连接了蚂蚁财富平台生态内200多家基金公司、券商和财经媒体的内容与服务,在通用大模型的基础上,“蚂小财”技术团队还搭建了一套金融智能增强的技术体系,实现了金融场景内专业功能、交互体验的全面增强。
“金融领域是国内AI技术应用的焦点场景之一,但天然也对AI的专业性、严谨性等能力提出更高标准,目前国内AI在金融领域的表现逐渐提升,不断从‘博闻强识’走向‘专业审慎’,为下一阶段大规模应用打好了基本盘。”测评团队负责人、上海财经大学教授张立文表示,这些“AI+金融场景”的积极稳妥探索,有助于在国际AI产业竞争中保持领先身位,也将打开我国数字金融、普惠金融建设的新局面。

还没有评论,来说两句吧...