游乐游手机版
首页/AI热点日报/热点详情

财跃星辰与上海交大联合发布金融智能体评测新框架

类型:热点整理2026-07-18
上海交大与财跃星辰等联合发布金融智能体评测新框架,提出以“资本-资产匹配”替代传统文本生成评测。实验显示,模型在匹配任务中能力短板明显。新框架围绕六大维度评测三项核心能力,并已上线配套实践平台。

在2026世界人工智能大会的“上海交通大学·AI未来发展论坛”上,一套全新的金融智能体评测框架正式亮相。这一成果由上海交通大学计算机学院可扩展计算所宋涛团队,联合财跃星辰、阶跃星辰、睿远基金等机构共同推出,不仅是一套技术方案,更代表着对行业评测逻辑的深度反思。同步发布的84页立场论文《Rethinking Financial AI Benchmarks》,则将这种反思提升至理论层面。

财跃星辰联合上海交大发布金融智能体评测新框架

长期以来,金融AI的评测标准停留在“以研报相似度衡量能力”的层面——只要AI撰写的研报、备忘录在形式上与人类分析师相近,就被认为具备金融分析能力。然而,本次发布的框架首次提出以“资本-资产匹配”为核心的评测理念,试图打破这一长期存在的误区,为金融智能体从辅助工具转向真实决策,提供了真正可信的评估标尺。

本次发布作为WAIC产学研融合的标志性成果之一,备受关注。论坛以“产学研深度融合”为主题,汇聚了图灵奖得主Richard Sutton、中国科学院院士鄂维南等顶尖学者,以及宁德时代、阶跃星辰等产业代表,深入探讨AI与实体产业的融合路径。金融智能体评测框架的诞生,正是学术界与产业界联手,破解金融AI落地核心难题的一次重要实践。

问题的核心在于:金融大模型与智能体的普及速度日益加快,但行业对AI能力的评估方式,始终未能跳出“产出是否接近人类分析师”的框架。研究团队在立场论文中指出,这种评测逻辑存在根本性缺陷——研报、决策备忘录等产物,本质上是人类在有限认知带宽下处理海量信息、协调组织决策的历史性工作方式,而非金融活动所要解决的核心经济问题。

研究团队一针见血地指出:“金融的核心目标是资金与资产的匹配。撰写研报仅为过程,而非最终目标。”当智能体的信息处理能力远超人类认知带宽后,若仍以“复现人类工作产物”作为评测标准,不仅无法真实衡量AI的金融决策能力,还会误导产品研发方向,使模型停留在“文本美观度”的表层,难以触及真正的决策核心。

为了验证这一判断,研究团队设计了一个预注册的配对对照实验,选取四款前沿金融大模型进行同题测试。结果颇具说服力:在“撰写行业研报”“生成投资备忘录”等文本生成类任务中,四款模型得分普遍较高;但在“判断某类资产品种是否适配特定资金属性”这类匹配核心任务上,模型整体成绩出现显著下滑,配对效应量d_z达到1.33,统计显著性极高。

需要强调的是,团队明确表示这并非一个模型排行榜,而是探针性质的对照研究。其核心价值在于戳破了行业“重文本、轻决策”的评测泡沫——许多看似表现优异的金融AI,在触及决策本质的核心任务上,能力短板极为显著。这恰恰是当前许多金融AI“看上去好用,实际难以落地”的根本原因。

基于这一发现,联合团队提出了全新的评测框架,从底层逻辑上彻底重构了评测视角:从考察“文本生成质量”转向考察“资金-资产匹配能力”。

具体而言,新框架围绕收益、风险、期限、流动性、收益结构与约束六大核心维度设计评测任务,分层考察智能体的三项核心能力:一是理解资金端诉求,准确识别资金的风险偏好、期限要求、流动性约束等属性;二是基于经济实质分析资产,穿透产品表象判断其底层风险收益特征;三是输出可审计的决策结论,明确给出匹配、不匹配、信息不足暂缓判断三类结果。

值得一提的是,框架将“主动拒答”与“判断不匹配”均视为合格答案。这种做法旨在引导智能体建立审慎的决策逻辑,避免为生成答案而强行输出错误结论,反而更贴合金融场景对合规与风控的严格要求。

与评测框架同步上线的还有配套实践平台。该平台将任务设计、资产覆盖、评分引擎、人机双轨评审与持续观测五大环节融合为可迭代的评测流水线,从正确性、适配性、鲁棒性、合规性四个维度进行全方位评分,并输出针对性的弱项诊断报告。目前平台已支持金融大模型、研究助手、投资顾问、资产配置系统四类产品同台对比,基本覆盖了不同类型金融AI产品的评测需求。

上海交通大学计算机学院副研究员宋涛表示,过去的评测体系默认复现人类工作产物即等同于具备金融能力,但当智能体不再受限于人类认知带宽时,这一前提已不再成立。真正应该被评测的,是不随工作流程变化的经济功能——资金与资产的匹配效率,而这恰恰是过往评测体系最为缺失的一环。

财跃星辰CTO白祚博士则指出行业当下的关键转折点:金融智能体正从辅助撰写材料转向参与真实决策。在这一阶段,行业最需要的并非再多一个写得像分析师的模型,而是一套可验证、可信任的评测基础设施,让金融机构在将资金决策交予智能体之前,能够有据可依。谁能率先建立资金与资产匹配的能力标准,谁就掌握了智能体从实验室走向真实资金决策的主动权。

来源:https://www.cls.cn/detail/2430129

相关热点

继续查看同栏目近期热点。

延伸阅读

补充最近整理过的热点入口。