游乐游手机版
首页/科技数码/文章详情

港科大新突破:代码本技术助力AI医学影像更稳定

时间:2026-01-29 11:25
这项由香港科技大学(广州)和香港科技大学联合开展的突破性研究发表于2025年的NeurIPS会议,有兴趣深入了解的读者可以通过论文编号arXiv:2601 10124v1查询完整论文。医学图像分析就


这项由香港科技大学(广州)和香港科技大学联合开展的突破性研究发表于2025年的NeurIPS会议,有兴趣深入了解的读者可以通过论文编号arXiv:2601.10124v1查询完整论文。

医学图像分析就像医生看X光片一样,需要准确识别病灶位置。但现在的AI医生面临一个尴尬问题:训练数据太少。医院里标注好的图像就像教科书,数量有限且制作成本昂贵,需要专业医生花费大量时间仔细标记每个病灶。

为了解决这个问题,科学家们想出了一个聪明的办法,叫做半监督学习。这就像让学生既用教科书学习,又通过大量没有标准答案的练习题来提升能力。在这个过程中,有一种叫做"特征丢弃"的技术被广泛使用,它的工作原理类似于故意制造一些"噪音"来增强AI的抗干扰能力。

然而,这种传统的丢弃技术就像调音师调节音响设备一样,需要非常精确地控制"丢弃率"这个参数。如果丢弃得太少,就像音量开得太小,起不到锻炼效果;如果丢弃得太多,就像音量开得震耳欲聋,反而会损坏系统。研究团队通过大量实验发现,当丢弃率超过70%时,AI的表现会急剧下降,甚至产生完全无法使用的结果。

面对这个技术难题,香港科技大学的研究团队提出了一个革命性的解决方案:VQ-Seg。他们的核心创新是用"量化扰动模块"(QPM)来替代传统的丢弃技术。这个新方法就像是把连续的颜色调色板换成了一个有限颜色的调色盒。

具体来说,传统方法就像在一张彩色照片上随机涂黑一些像素点,这种做法虽然能增加难度,但控制不当就会让图片变得面目全非。而新方法则像是把照片先转换成马赛克风格(每个小块用一种代表颜色),然后通过巧妙地交换这些小块的位置来创造变化。这种方法的妙处在于,不管怎么交换,图片的基本信息都不会丢失,只是排列方式发生了变化。

研究团队还设计了一个巧妙的"双分支架构"。这就像让AI同时学习两门课程:一门是图像重建课(学会把马赛克图片还原成原始清晰图片),另一门是病灶识别课(学会在图片中找到病变区域)。通过同时学习这两门课程,AI不仅能保持对图像细节的敏感度,还能增强对病灶特征的识别能力。

更进一步,研究团队还引入了一个"语义对齐器"(PFA),它的作用就像给AI配备了一位经验丰富的老师。这位老师来自于预训练的视觉基础模型DINOv2,虽然它原本是在自然图像上训练的,但研究发现它在医学图像上也表现出色。通过这位老师的指导,AI能够更好地理解图像中的高级语义信息,弥补量化过程中可能丢失的细节。

为了验证新方法的有效性,研究团队收集了一个大规模的肺癌数据集,包含828个CT扫描样本,专门标注了中心型肺癌的位置。这个数据集的建立本身就是一项重要贡献,为肺癌AI诊断研究提供了宝贵资源。

实验结果令人印象深刻。在只使用5%标注数据的情况下,VQ-Seg的Dice得分达到了0.6643,显著超过了当前最好方法Unimatch的0.6493。这个提升虽然看似微小,但在医学图像分析领域,即使1%的提升都可能意味着更多生命的挽救。当使用10%标注数据时,VQ-Seg的优势更加明显,Dice得分提升到0.7852,相比MCNet的0.7555有了近3%的显著提升。

研究团队还进行了详细的消融实验,逐一验证了各个组件的贡献。结果显示,量化扰动模块将基础模型的Dice得分从0.7443提升到0.7701,双分支架构进一步提升到0.7784,而语义对齐器则贡献了额外的性能提升。当所有组件结合使用时,最终模型达到了最佳性能。

从理论角度来看,研究团队还提供了严格的数学证明。他们通过KL散度分析表明,传统的丢弃方法在高丢弃率下会导致特征分布的剧烈变化,而他们的量化扰动方法则能保持分布的稳定性。这就像传统方法是在暴风雨中航行,而新方法则是在微风中前进,虽然都有扰动,但后者更加可控和安全。

除了在自建的肺癌数据集上取得突破,VQ-Seg在公开的ACDC心脏图像数据集上也表现出色,进一步证明了方法的通用性。这种跨领域的成功表明,该方法不仅适用于肺癌诊断,还可能在其他医学图像分析任务中发挥重要作用。

研究团队还通过可视化分析展示了代码本的演化过程。初始阶段,只有3.4%的代码被激活使用,随着训练进行,使用率逐渐提升到67%,最终达到98%。这个过程就像一个图书馆逐渐被充分利用,从最初只有少数几本书被借阅,到最后几乎每本书都发挥了作用。

值得注意的是,VQ-Seg在不同标注数据比例下都保持了稳定的性能优势。即使在标注数据充足的情况下,它仍然能够超越传统的全监督方法,这说明该方法不仅在数据稀缺时有效,在数据丰富时也能带来额外收益。

当然,这项研究也存在一些局限性。当前的扰动操作只能在离散的量化空间中进行,难以直接扩展到连续特征表示。此外,引入基础模型虽然带来了语义信息的增强,但也增加了计算开销。

研究团队表示,未来的工作将聚焦于开发可在连续空间中工作的可控扰动机制,并探索更高效的基础模型集成方法。他们相信,随着这些技术的进一步完善,AI在医学图像分析领域的应用将变得更加准确和可靠。

说到底,这项研究就像为医学AI领域带来了一套全新的"工具箱"。传统的工具虽然有效,但使用起来需要小心翼翼,稍有不慎就可能出问题。而新工具不仅更加稳定可靠,还能在各种复杂情况下保持良好性能。这对于医生们来说意味着什么呢?未来他们将拥有更加智能和可靠的AI助手,能够在CT扫描中更准确地识别肺癌等疾病,从而为患者提供更及时有效的治疗。对于医学AI研究领域而言,这套新方法也为其他类似问题的解决提供了有价值的思路和工具。有兴趣深入了解技术细节的读者,可以通过前述论文编号查阅完整的研究报告。

Q&A

Q1:VQ-Seg和传统医学图像分析方法有什么不同?

A:VQ-Seg最大的不同在于用"量化扰动"替代了传统的"随机丢弃"技术。传统方法像在图片上随机涂黑像素,控制不当就会损坏图像信息。而VQ-Seg先把图像转换成离散的"代码本"形式,然后通过交换代码位置来创造变化,这样既能增加训练难度,又不会丢失关键信息,使AI训练更稳定可控。

Q2:为什么VQ-Seg在医学图像标注数据很少的情况下效果更好?

A:VQ-Seg采用了"双分支架构",让AI同时学习图像重建和病灶识别两个任务。这就像让学生既学理论又做实践,通过图像重建任务提供额外的自监督信号,即使标注数据少,AI也能从大量未标注图像中学到有用信息。再加上引入预训练模型作为"语义老师",进一步提升了学习效果。

Q3:VQ-Seg能应用到其他疾病的诊断吗?

A:研究结果显示VQ-Seg具有很好的通用性。除了在肺癌CT图像上表现出色,它在心脏MRI图像的ACDC数据集上也取得了最佳成果。这说明该方法不仅限于特定疾病,而是一个通用的医学图像分析框架,理论上可以应用到各种医学影像诊断任务中。

来源:https://www.163.com/dy/article/KKD665HL0511DTVV.html
上一篇复旦大学:人工智能通过太空考验,能否胜任星际调度师? 下一篇上海实验室发布AI智能安全卫士,赋能机器人实现自我监督
本站内容用于信息整理与展示,如有侵权或内容问题请及时联系处理。

相关推荐

补充同频道和同主题内容,方便继续浏览更多相关内容。

同类最新

继续查看同栏目最近更新的文章。

更多
优必选CEO周剑:家庭机器人生态核心投入过半精力
科技数码 · 2026-07-01

优必选CEO周剑:家庭机器人生态核心投入过半精力

先说几个核心判断:优必选正在布局一盘长远战略。创始人兼CEO周剑在近期一场媒体沟通会上,直接亮出了公司未来的发展路线——工业、商用、家庭陪伴机器人三条业务主赛道并行推进,现阶段每条线各占约一半精力。一边是已经能够稳定创造收入的工业场景,另一边则是他眼中“最具想象力与未来空间”的家庭陪伴领域。工业人形

CPO/NPO/OIO开启封装级光连接价值空间,技术路线尚未收敛
科技数码 · 2026-07-01

CPO/NPO/OIO开启封装级光连接价值空间,技术路线尚未收敛

6月30日,申银万国在光连接系列研报中重点指出,MPO光连接器领域的投资机会值得高度关注。通俗来说,随着AI算力集群持续扩张,光互联升级带来的连锁效应——数据中心光纤通道数量、前面板端口密度、机柜内光纤管理复杂度——均在同步攀升。光连接器的角色早已超越传统的低价值标准件,如今它直接决定着链路插损、可

龙岗AR实景剧本游内测体验短板有效破解之道
科技数码 · 2026-07-01

龙岗AR实景剧本游内测体验短板有效破解之道

在今年龙岗区第二届人工智能与机器人发展大会上,区级部门一次性推出了7个AI“龙搭子”。其中,名为“龙导游”的成果成为文商旅融合领域的核心亮点。据南都N视频记者了解,依托“龙导游”打造的全区全域AR实景剧本游“龙岗大陆”,已在今年五一假期发布了内测版本。经过一个月市场验证后,该项目正式启动面向全社会的

南下资金6月30日净买入中芯国际与建滔积层板
科技数码 · 2026-07-01

南下资金6月30日净买入中芯国际与建滔积层板

6月30日,南下资金持续大举买入港股,单日净流入金额高达58 95亿港元。接下来,我们直接盘点哪些个股获得资金青睐、哪些遭到减持: 净买入方面,中芯国际领跑全场,单日吸金19 33亿港元;建滔积层板紧随其后,净买入10 59亿港元;腾讯控股获得7 65亿港元净流入;智谱(02513 HK)也有6 5

电动汽车电池新国标7月实施热失控不起火不爆炸
科技数码 · 2026-07-01

电动汽车电池新国标7月实施热失控不起火不爆炸

自2026年7月1日起,两项关乎电动汽车安全的核心强制性国家标准将正式实施,为行业加装“安全锁”——《电动汽车安全要求》(GB 18384-2025)与《电动汽车用动力蓄电池安全要求》(GB 38031-2025)同步落地。此次标准升级,从整车架构与电池系统两大维度,精准填补了近年来多起事故暴露出的