在线体验:https://segment-anything.com/demo
中文介绍:https://mp.weixin.qq.com/s/YKts1S8Bd0CyPbs22Cw6gg
摘要
Meta AI发布了Segment Anything Model(SAM),这是第一个图像分割基础模型,可以通过prompt一键抠图。这个模型可以从照片或视频中对任意对象实现一键分割,并且能够零样本迁移到其他任务。SAM已经学会了「物体」的一般概念,甚至对于未知物体、不熟悉的场景以及模糊的案例也是如此。SAM还能够泛化到新任务和新领域,从业者并不需要自己微调模型了。
要点
- Meta AI发布了Segment Anything Model(SAM),第一个图像分割基础模型,可以一键抠图。
- SAM可以从照片或视频中对任意对象实现一键分割,并且能够零样本迁移到其他任务。
- SAM已经学会了「物体」的一般概念,甚至对于未知物体、不熟悉的场景以及模糊的案例也是如此。
- SAM还能够泛化到新任务和新领域,从业者并不需要自己微调模型了。
- 通过prompt encoder内,指定一个点、一个边界框、一句话,可以一键分割出物体。
- SAM模型掌握了「什么是对象」这个概念,可以为任何图像或视频中的任何对象生成掩码,即使是它在训练中没有见过的对象。
- SAM具有如此广泛的通用性,足以涵盖各种用例,不需要额外训练,就可以开箱即用地用于新的图像领域,无论是水下照片,还是细胞显微镜。