一、语义分割
1.sam3.1语义分割

定义:根据提示词对素材进行快速分割的技术

支持格式:可处理图片和视频两种素材类型

基础功能:

抠图/画遮罩

局部重绘/局部修复

输出图像和遮罩用于后续处理

1)图片分割

示例操作

单对象分割:

输入提示词"apple"可抠出单个苹果

模型最大令牌数为32,仅支持英文提示词

多对象分割:

使用冒号指定数量,如"apple:2"可抠出两个苹果

多个对象用英文逗号分隔,如"apple,orange"

特定位置分割:

可指定位置特征,如"右边的橘子"

人体部位分割示例:

"hand"默认抠出单手

"hand:2"可抠出双手

可精确指定"左手"或"右手"

人像分割技巧:

输入"face"可精确抠出人脸

身体部位需使用英文标注,如"hand"、"left hand"

2)视频分割

示例操作

操作流程:

上传视频文件

输入英文提示词(如"girl")

点击运行生成分割结果

多对象处理:

使用英文逗号分隔多个对象,如"girl,deer"

输出包含标记对象的视频和遮罩

注意事项:

必须使用英文提示词

标点符号需使用英文格式

2.ComfyUI搅拌站资源下载

在模型广场搜索"sam3.1图片和视频语义分割"

包含模型文件和工作流文件

安装方法:

将models文件夹覆盖到ComfyUI目录

安装必要插件节点

重启ComfyUI后导入工作流

问题排查:

使用ComfyUI管理大师的工作流分析功能

自动检测缺失插件和依赖

二、知识小结
功能模块核心功能操作示例技术特点应用场景
图片语义分割根据提示词抠图输入"apple"抠苹果输入"hand:2"抠双手支持多对象同时分割支持方位词识别(左/右)素材处理局部重绘遮罩制作
视频语义分割动态对象追踪输入"girl"标记小女孩输入"deer"标记白鹿逐帧自动处理支持英文提示词视频后期动态遮罩特效制作
系统要求模型部署需覆盖models文件夹重启comfyui提供免费工作流下载开发者设计师

可点击下方原文链接观看视频教程👇

https://comfyit.cn/blog/257/?invite_code=TSH

Logo

北京人形旗下天工造物具身智能开源社区,聚焦具身天工与慧思开物两大平台

更多推荐