首页 游戏 软件 资讯 排行榜 专题
首页
AI
港大研究揭示:监督微调与强化学习如何推动AI智能演进

港大研究揭示:监督微调与强化学习如何推动AI智能演进

热心网友
51
转载
2025-09-21

人工智能领域一项困扰研究者数年的关键课题终于取得重大突破——机器究竟是在死记硬背训练数据,还是真正掌握了问题求解的内在规律?来自国际顶尖实验室的最新研究成果,通过开创性的实验设计,为我们揭开了AI学习机制的神秘面纱。

免费影视、动漫、音乐、游戏、小说资源长期稳定更新! 👉 点此立即查看 👈

研究团队精心打造了一个极具启发性的"24点数学谜题测试平台",要求AI运用四张扑克牌通过基本运算得出24点。实验最具突破性的设计在于引入动态赋值规则:J、Q、K在测试过程中会随机代表10或者11-13的数值。这种巧妙的设定相当于让AI面对同一数学问题的不同表述方式,从而清晰区分出两种主流训练方法的效果差异。

在纯数字运算测试环节,采用强化学习训练的AI展现出惊人的适应能力。当赋值规则从固定改为动态时,其解题准确率逆势上扬,由80.8%攀升至91.8%,提升幅度超过10个百分点。反观监督微调训练的AI则遭遇严重水土不服,准确率从80.8%断崖式跌落至1.3%,几乎完全失去解题能力。这一差距在视觉模态测试中更为惊人——当扑克牌从文字描述变为真实图片时,强化学习模型仍能保持87.6%的优异成绩,而监督微调模型则彻底失灵。

研究发现强化训练带来的认知提升具有跨模态迁移特性。在图文结合的复合任务中,经过强化学习的AI不仅能准确识别各种字体样式、色彩设计的扑克牌,还能同步完成复杂运算推理。这一表现有力证实了研究团队的假说:强化学习能帮助AI构建更为抽象的概念框架,使其在面对新情境时保持推理能力。

但研究也揭示了两种训练方式的互补关系。当跳过监督微调直接进行强化训练时,AI在基础语言理解任务上的表现下滑62%。这说明监督微调对构建基本表达能力至关重要,就好比孩童需要先掌握语言规则才能进行逻辑思考。

在模拟城市导航的现实场景测试中,这种差异表现得尤为明显。当测试环境将绝对方向(东南西北)改为相对方向(左右转向)时,强化学习模型能快速调整导航策略,而监督微调模型则完全迷失方向,两者在复杂路网中的误差率分别为8.2%和47.3%。

深入分析表明,强化学习的优势来源于其独特的"探索-反馈"机制。在24点实验中,经过强化的AI会主动尝试多样化的运算组合,通过奖励信号持续优化策略。这种探索式学习使其能够抓住数字间的深层关联,而非简单地记忆特定牌组解法。相比之下,监督微调模型过度依赖训练样本中的固定模式,导致泛化能力严重不足。

研究特别强调,训练效果与模型基础能力密切相关。当初期语言理解能力不足时,强化学习的收益会明显下降。这也解释了为何业界领先的AI系统普遍采用"监督微调筑基+强化学习提升"的混合训练范式。

这一发现在医疗诊断辅助、自动驾驶等高价值领域具有重大实践意义。实验数据表明,采用混合训练的AI在遇到罕见病例描述时,诊断准确率较纯监督微调模型高出39%。这种提升源于强化学习赋予的深层推理能力,使其能够透过表象把握疾病本质。

目前,主流AI研发机构已开始调整训练策略。某顶尖实验室工程师透露:"我们正在重构训练流程,先用监督微调夯实基础,再用强化学习释放潜能。这就像培养数学家——先熟练掌握运算规则,再发展创造性思维。"

这项研究引发的思考已超越技术范畴。当AI在数学推理中展现出类似人类的认知跃迁时,我们不得不重新思考"智能"的本质定义。实验中某个强化学习模型在多次失败后突然顿悟正确解法的那一刻,与人类的创造性思维过程惊人相似,这为理解机器认知提供了宝贵样本。

随着混合训练模式的广泛应用,AI正在发生质变。最新测试显示,采用新训练方案的对话系统在处理隐喻表达时,理解准确率从58%跃升至82%。这一进步充分印证了核心发现:真正的AI智能不应是数据存储器,而应该发展成为具备持续进化能力的认知系统。

来源:https://www.itbear.com.cn/html/2025-09/963327.html
免责声明: 游乐网为非赢利性网站,所展示的游戏/软件/文章内容均来自于互联网或第三方用户上传分享,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系youleyoucom@outlook.com。

最新APP

宝宝过生日
宝宝过生日
应用辅助 04-07
台球世界
台球世界
体育竞技 04-07
解绳子
解绳子
休闲益智 04-07
骑兵冲突
骑兵冲突
棋牌策略 04-07
三国真龙传
三国真龙传
角色扮演 04-07

热门推荐

美国SEC主席Paul Atkins证实:加密货币安全港提案已送交白宫审查
web3.0
美国SEC主席Paul Atkins证实:加密货币安全港提案已送交白宫审查

加密货币行业翘首以盼的监管里程碑,终于有了实质性进展。美国证券交易委员会(SEC)主席保罗·阿特金斯(Paul Atkins)近日证实,那份允许加密项目在早期获得注册豁免权的“安全港”框架提案,已经正式送抵白宫,进入了最终审查阶段。 在范德堡大学与区块链协会联合举办的数字资产峰会上,阿特金斯透露了这

热心网友
04.08
微策略Strategy报告:第一季录得144.6亿美元浮亏 再斥资约3.3亿美元买进4871枚比特币
web3.0
微策略Strategy报告:第一季录得144.6亿美元浮亏 再斥资约3.3亿美元买进4871枚比特币

微策略Strategy报告:第一季录得144 6亿美元浮亏 再斥资约3 3亿美元买进4871枚比特币 市场震荡的威力有多大?看看Strategy的最新季报就明白了。根据其最新向美国证管会(SEC)提交的8-K报告,受市场剧烈波动影响,这家公司所持的比特币在第一季度录得了一笔惊人的数字——144 6亿

热心网友
04.08
稳定币发行商Tether再扩Web3版图!Paolo Ardoino:正开发去中心化搜索引擎Hypersearch
web3.0
稳定币发行商Tether再扩Web3版图!Paolo Ardoino:正开发去中心化搜索引擎Hypersearch

稳定币巨头Tether的动向,向来是加密世界的风向标。这不,它向Web3基础设施的版图扩张,又迈出了关键一步。公司执行长Paolo Ardoino在社交平台X上透露,其工程团队正在全力“烹制”一个新项目——去中心化搜索引擎 “Hypersearch”。这个消息一出,立刻引发了行业的广泛猜想。 采用D

热心网友
04.08
Base链首个原生DeFi借贷协议Seamless Protocol倒闭 将于2026年6月30日下线
web3.0
Base链首个原生DeFi借贷协议Seamless Protocol倒闭 将于2026年6月30日下线

基地位于Coinbase旗下以太坊Layer2网络Base的Seamless Protocol,日前正式宣告了服务的终结。这个曾经吸引了超过20万用户的原生DeFi借贷协议,在运营不到三年后,终究没能跑赢时间。它主打的核心产品是Integrated Leverage Markets(ILMs)——一

热心网友
04.08
PAAL代币如何参与治理?社区投票能决定哪些事项?
web3.0
PAAL代币如何参与治理?社区投票能决定哪些事项?

PAAL代币揭秘:深度解析Web3社区治理的核心钥匙 在去中心化自治组织的浪潮中,谁真正掌握了项目的话语权?PAAL代币提供了一套系统化的答案。它不仅是生态内流转的价值媒介,更是开启链上治理大门的核心凭证。通过持有并质押PAAL代币,用户能够对协议升级、资金分配乃至战略方向等关键事务投出决定性的一票

热心网友
04.08