开源InstanceAssemble：小红书让AI精准还原复杂图像排版
12月26日，IT之家从相关渠道获悉，小红书携手复旦大学，联合推出了一项在布局控制生成领域的突破性方案——InstanceAssemble。这项技术通过创新的“实例组装注意力”机制，成功实现了从简单到复杂、从稀疏到密集布局的精准图像生成。目前，这项研究成果已被人工智能顶级会议NeurIPS 2025收录。
近年来，AI绘画技术发展迅速，已经从最初的“文字生成图像”逐步迈向“布局控制生成”阶段。后者能依据用户设定的空间布局约束，生成与之精确对应的图像内容。
然而，“布局控制生成”技术面临着一个核心难点：如何让AI既精准地按照用户指定的位置和内容生成图像，又有效避免布局对不准、语义脱节或计算成本过高等问题。
此次复旦与小红书联合发布的InstanceAssemble新技术，成功实现了对图像中每个物体的精确布局控制，标志着AI绘画正式迈入了“可精准构图”的新阶段。
该技术基于当前主流的扩散变换器架构，开创性地提出了“实例拼装注意力”机制。用户只需提供每个物体的边界框位置和内容描述，AI就能在对应位置生成符合语义的图像内容。无论是简单的几个物体组合，还是密集复杂的场景构图，InstanceAssemble均能保持高精度的布局对齐与语义一致性。
值得一提的是，该技术还采用了轻量级适配方式来降低使用门槛，无需重新训练整个模型。其仅通过约7100万个参数，就能适配Stable Diffusion3-Medium模型；而对Flux.1模型的适配参数占比更是低至0.84%。
在实验中，InstanceAssemble在包含90万个实例的密集布局数据集上表现优异，大幅超越了现有方法。
为了更准确地衡量布局与图像的匹配程度，研究团队还创建了一个包含5000张图像和9万个实例的“Denselayout”基准测试集，并引入了全新的“Layout Grounding Score”评估指标。
实验结果表明，InstanceAssemble在各种布局条件下均表现领先。即使在训练时仅使用了稀疏布局的数据，在面对密集布局时，它也能展现出稳健的性能。
目前，该项技术已正式开源，相关代码和预训练模型均可在GitHub获取。这为设计、广告和内容创作等领域的应用落地，提供了强有力的技术支撑。
相关攻略
Adobe Photoshop 引入全新 Firefly Image 3 图像 AI 模型，Beta 版开放下载 熟悉创意工具的朋友大概都注意到了，从去年开始，Adobe就在其全线软件产品中，密集地集成各类AI功能。这其中，基于Firefly AI的图像生成能力，已经逐步渗透到Photoshop等C
京东开源图像模型JoyAI-Image-Edit，从平面修图升级为三维空间重塑 4月7日，京东探索研究院正式宣布，开源自研的JoyAI-Image-Edit图像模型。这不仅是又一个开源工具，更标志着图像生成编辑技术的一次关键转向：从二维平面迈入了三维空间。 简单来说，这个模型被设计为业内首个将“空间
IT之家 3 月 15 日消息，X 平台博主 @ZONEofTECH 前天发文称，苹果 MacBook Neo 笔记本可以手动切换到 P3 广色域，实际上可以显示 P3 图像。据介绍，MacBook
IT之家 2 月 26 日消息，荣耀影像最新微博今日放出了荣耀 Magic V6 折叠屏手机的拍摄样张，新机将延续 AiMAGE 影像能力。IT之家注：去年 3 月，荣耀在 2025 年世界移动通信
2月13日，字节跳动Seed团队推出Seedream 5 0 Lite智能图像创作模型。相比4 0版本，模型在理解、推理和生成方面全面提升。作为通向统一多模态模型的进一步探索，它开始能像人类设计师
热门专题
热门推荐
英国工党领袖斯塔默面临公众信任挑战，支持率低迷。类似困境在欧洲多国领导人中普遍存在，德国总理默茨与法国总统马克龙的支持率同样远低于不支持率，反映出欧洲政界广泛的信任危机。
芝麻开门：安全便捷的数字资产交易平台 在数字货币的世界里，选择一个可靠、便捷的交易入口是第一步。芝麻开门作为一款服务于全球用户的知名交易平台，以其多重安全防护、对主流币种的广泛支持以及现货、杠杆等丰富功能，成为了许多交易者的选择。今天，我们就来详细梳理一下如何通过官方渠道，安全地获取并使用芝麻开门平
全球债市因通胀担忧遭剧烈抛售，长期美债收益率升至近三年高位。30年期美债收益率一度突破5%，10年期与2年期收益率同步攀升。日本30年期国债收益率单日飙升20基点创新高。油价上涨加剧通胀忧虑，策略师建议关注美债收益率在5 25%-5 5%区间的后续动向。
欧易（OKX）：您的官方数字资产交易入口 在加密货币的世界里，选择一个可靠、功能全面的交易平台是第一步。欧易（OKX）作为全球领先的数字资产服务商，早已成为数百万用户的首选。它不仅提供比特币、以太坊等主流币种的现货交易，更将业务延伸至衍生品、DeFi以及NFT市场，构建了一个完整的加密生态。其背后，
gate io交易APP官方版 v7 19 1 安卓版下载与安装全指南 对于数字资产交易者来说，一个可靠、顺手的交易工具至关重要。Gate io交易APP，正是这样一款专业的平台，它为全球用户提供比特币、以太坊乃至上千种加密货币的实时行情与交易服务。其最新的安卓v7 19 1版本，在用户体验和系统稳