这两天一直在研究这个话题,踩了几个坑,把遇到的东西整理成文,供有需要的朋友参考。
最近ECCV 2026论文录用结果公布,360人工智能研究院的MoSA(Motion-Grounded Segment Anything)在海外技术圈引发了持续讨论——无需人工标注,仅通过观察视频中的运动规律,就能让AI自主建立“物体”的概念,这条无监督视觉基础模型路线确实刷新了很多人对分割模型的认知。
目录
但作为常年和AI工具打交道的开发者,比起纯学术层面的创新,我更关心一个更落地的坑:这些顶会级的技术突破,到底能不能走出论文,解决设计师、运营、开发人员日常开发里的真实痛点?
顺着MoSA往下梳理我才注意到,这篇ECCV论文只是360AI技术布局的一角。2026年上半年,360人工智能研究院一口气拿下了ICLR、CVPR、ICML、ECCV四大AI顶会共6篇论文,覆盖多模态理解与多模态生成两大核心方向。更难得的是,其中的核心能力早已不是停留在PDF里的学术成果——RevealLayer图层分解、FG-CLIP 2细粒度检索已经正式上线SaaS平台,甚至深度落地到了云盘、企业知识库等成熟产品场景中。
本文从实际产品体验的视角,聊聊这些主打精准可控的AI工具,到底能给真实开发流带来怎样的改变。
一、RevealLayer:把PS级拆图从小时级压缩到秒级
做过设计、电商运营的朋友大概率都懂拆图的痛苦:一张成品商业图要拆解成可编辑的分层素材,需要用钢笔工具抠边缘、修补被遮挡的背景、处理透明过渡,简单的图要十几分钟,复杂场景甚至要耗上一两个小时。遇到需要修改局部元素的需求,很多时候甚至不如重新做一张图效率高。
市面上的AI抠图、对象移除工具不算少,但大多逃不开两个硬伤:一是只能做“前景/背景”两层拆分,没法按需提取多个独立对象;二是对遮挡场景无能为力,移除物体后背景经常出现断层、残影,没法独立使用。
而RevealLayer最核心的价值,就是真正实现了“按需提取、指哪拆哪”的可控图层分解。
1.1 实际体验:框一下,就能拿到可编辑的分层素材
打开360人工智能研究院的SaaS体验页(https://pic.360.com/home),上传任意一张多物体场景图,只需要用Bounding Box简单框选各位想要单独提取的目标,模型就会自动完成两件事:
将目标对象输出为带完整Alpha通道的RGBA独立图层,边缘过渡自然,毛发、透明材质、阴影细节都能精准保留; 自动补全该对象遮挡的背景区域,生成完整、自然的背景层,不需要手动修补。
我测试了几个高频开发场景,完成度都超出预期:
电商商品修图:一张包含首饰、礼盒、背景布的静物图,框选珍珠项链后,不仅能提取出边缘干净的项链图层,被项链遮挡的礼盒纹理、背景布褶皱也被自然补全,后续换背景、调光影直接复用分层素材,不用重新修图。 AI生成图二次编辑:AI生成的海报经常出现“整体满意但局部要改”的坑,用RevealLayer把文字、装饰、主体拆成独立图层后,直接导入PS调整位置、修改颜色,比反复生成提示词高效得多。 视频帧去穿帮:从实拍视频中截取的画面,要移除多余的道具或穿帮物体,拆分后直接删除前景层即可,背景还原度远高于普通抹除工具。
1.2 背后的技术逻辑:不是抠图,是理解遮挡关系
之所以能做到这种效果,本质是因为RevealLayer走的不是“边缘识别+抠图”的老路,而是一套遮挡感知的图层分解框架。它通过区域感知留意力(Region-Aware Attention)和遮挡引导适配器(Occlusion-Guided Adapter),真正理解了图像中的前景、背景和遮挡层级关系,在分离图层的同时,能利用上下文推理出被遮挡的东西。
为了支撑这种能力,团队还构建了百万级的自然场景多图层数据集RevealLayer-100K,覆盖复杂遮挡、透明物体、阴影反射等真实场景。最终的效果就是:用户不需要精细的Mask标注,只用简单的框选就能拿到PS级的分层结果,大大降低了图层编辑的技术门槛。
对设计师和运营来说,它不是替代Photoshop,而是把拆图、补背景这种机械重复的工作,从小时级压缩到了秒级。
二、FG-CLIP 2:让AI检索从大概匹配到精准命中
如果说RevealLayer解决了“生成编辑不精准”的痛点,那FG-CLIP 2解决的就是“视觉理解不精细”的问题。
相信很多人都有过类似体验:云盘里存了几百G的素材和文档,想找一张“浅黄色带文字图案的塑料杯”,搜“塑料杯”出来几百张结果,得手动翻半天;企业知识库找资料,关键词匹配经常漏掉语义相关但表述不同的东西。
传统CLIP类模型解决了“图文能不能对应”的基础问题,但始终有一个瓶颈:它擅长理解整体语义,却分不清细节差异。同样是杯子,材质是塑料还是玻璃、图案是条纹还是格子、颜色是浅黄还是米白,这类细粒度差异很容易被忽略,直接导致检索精度在专业场景里大打折扣。
FG-CLIP 2的核心突破,就是把图文对齐的粒度从“整体类别”做到了“细节属性”。
2.1 实测体验:细到材质纹理的检索精度
我用一组高相似度的杯子图片做了测试,用非常细节的自然语言做检索,比如“带穿孔图案的淡粉色塑料杯”“带格子图案的深棕色塑料杯”“印有文字的红色纸杯”,FG-CLIP 2都能精准命中目标,不会混淆材质、图案和颜色,甚至能区分“塑料杯”和“纸杯”的质感差异。
除了短文本检索,它对长描述的支持也很好,输入一段描述场景、材质、姿态的长文本,同样能匹配到对应的图片。而且中英文双语都有不错的表现,对做跨境东西、多语言素材库的团队非常友好。
2.2 落地场景:从SaaS接口到产品原生能力
和很多停留在Demo阶段的模型不同,FG-CLIP 2早已深度融入了真实业务场景:
个人云盘场景:360AI云盘的AI搜索功能,底层就搭载了FG-CLIP 2的能力。用户不用记文件名,用自然语言描述图片、文档的内容特征,就能精准定位文件,大大提升了素材查找的效率。 企业知识库场景:360亿方云企业云盘的AI知识库,通过FG-CLIP 2实现了跨模态检索,不管是图片、文档、PPT还是视频封面,都能通过自然语言精准检索,解决了企业内部资料分散、查找困难的普遍痛点。
对开发者来说,它也提供了标准化的SaaS调用接口,可以快速接入到自有产品中,应用在图文检索、内容推荐、安防视频智能分析等场景,不用从零训练大模型,就能获得顶级的细粒度理解能力。
从“能搜到”到“搜得准”,看似只是一小步,但对每天要处理海量素材的运营、档案管理员、内容创作者来说,工作效率的提升是实打实的。
三、不止两款工具:一条完整的精准可控技术闭环
RevealLayer和FG-CLIP 2只是已经落地的代表。把上半年6篇顶会论文串联起来看,各位会注意到360的AI研究不是零散的单点突破,而是一条非常清晰的技术路线——从多模态理解到多模态生成,全链路围绕“精准、可控、可靠”做优化,目标不是做最炫的演示效果,而是做最能用在真实场景里的AI能力。
3.1 多模态理解:从看懂到看准再到自主学
理解侧的三篇论文,形成了逐层递进的能力矩阵:
FG-CLIP 2(ICML 2026):解决“看懂细节”的问题,让AI能精准区分图文的细粒度属性,是精准检索、内容理解的基础; AML(ICLR 2026):解决“找准目标”的问题,提升Agent的视觉Grounding能力,让AI能准确定位用户想操作的界面元素、场景对象,是GUI Agent、自动化办公的核心感知能力; MoSA(ECCV 2026):解决“自主认知”的问题,通过无标注视频中的运动信息学习物体概念,不用依赖人工标注就能持续扩展视觉认知,是开放世界Agent视觉基础模型的新路径。
从细粒度对齐,到精准目标定位,再到自主学习新物体,360在理解侧的研究,始终围绕“让AI的视觉感知更可靠、更能应对复杂开放场景”展开。
3.2 多模态生成:从能生成到可控生成
生成侧的三篇论文,则瞄准了AI生成“不可控、难修改、效率低”的行业痛点:
NAMI(CVPR 2026):通过桥接渐进式Rectified Flow架构,在保证画质的前提下,把1024×1024图像的推理时间降低64%,解决了高分辨率生成“效果好就慢”的痛点; RefTON(CVPR 2026):主打虚拟试衣场景的精准生成,不用人体姿态、分割掩码等复杂辅助输入,仅靠人物图和服装图就能生成高保真试穿效果,还能通过参考图还原蕾丝、透明面料等精细设计; RevealLayer(ICML 2026):实现了生成后的可控编辑,把固化的图像拆解为可编辑图层,解决了AI生成“一改就崩”的问题。
从提升生成效率,到垂直场景高保真生成,再到生成后可控编辑,生成侧的技术路线最终指向同一个目标:让AI生成能力真正能融入生产工作流,而不只是创意演示工具。
四、AI工具的下半场,拼的是解决真问题的能力
体验完这些落地产品,我最大的感受是:现在的AI行业,从来不缺“能生成好看图片”“能陪人聊天”的模型,缺的是真正能嵌入工作流、解决具体痛点、稳定可靠的工具。
很多AI产品的逻辑是“我有一个大模型,找找能做什么”,最后做出来的功能往往炫技大于实用;而360的这条技术路线,逻辑恰恰相反——先找到真实场景里的普遍痛点:拆图效率低、检索不精准、生成不可控、定位不稳定,再用顶会级的技术逐个击破。
这种风格说实话和360的安全公司基因密不可分。做安全出身的团队,天然更关注鲁棒性、抗干扰性、复杂环境下的可靠性,不会为了追求演示效果牺牲稳定性和可控性。而这些特质,恰恰是产业应用、Agent时代的AI最核心的要求。
毕竟,Agent不是用来聊天解闷的,是要帮人完成具体操作的;产业AI不是用来生成壁纸的,是要嵌入生产流程提效降本的。当AI从“尝鲜阶段”进入“实用阶段”,“精准、可控、可靠”就会比“参数大、效果炫”重要得多。
五、写在最后
从ECCV的前沿探索,到开箱即用的SaaS工具,再到嵌入云盘、企业知识库的底层能力,360这6篇顶会论文背后,是一条“研究问题-模型能力-产品场景”的完整闭环。
MoSA代表了下一代视觉基础模型的探索方向,让我们见到了AI自主学习视觉认知的可能性;而RevealLayer、FG-CLIP 2这些已经落地的能力,则正在让“精准可控的AI”从概念变成每天都能用的生产力工具。
对开发者和从业者来说,比起追逐大模型的参数竞赛,这种扎根具体场景、解决真实痛点的技术路线,反而更值得长期关注。毕竟AI技术的终极价值,从来都不是发了多少篇顶会论文,而是能不能真正提升我们的工作效率,解决真实世界里的问题。
这篇笔记就先到这里,后面用到新的思路或者发现有问题再补充。
评论 (0)
暂无评论