原型演化的小样本语义分割方法及系统
摘要文本
本发明提供了一种原型演化的小样本语义分割方法及系统，属于图像处理技术领域。所述方法，包括：根据支持图像得到支持特征，根据查询图像得到查询特征，利用支持特征创建一个初步原型，结合初步原型和支持掩码，根据查询特征生成一个主要包含前景特征的伪原型；采用伪原型对支持图像进行反向分割，根据反向分割结果将支持图像的基础真值掩模解耦为主区域和辅助区域，得到两个演化原型；从全局背景原型中剔除反映当前前景类的潜在成分，生成自定义背景原型；将查询特征、两个演化原型以及自定义背景原型融合后得到语义分割结果；本发明将支持和查询的特征整合到原型生成中，极大的提高了语义分割结果的精确性。
申请人信息
- 申请人:山东大学
- 申请人地址:250061 山东省济南市历下区经十路17923号
- 发明人: 山东大学
专利详细信息
| 项目 | 内容 |
|---|---|
| 专利名称 | 原型演化的小样本语义分割方法及系统 |
| 专利类型 | 发明授权 |
| 申请号 | CN202311713253.9 |
| 申请日 | 2023/12/14 |
| 公告号 | CN117422879B |
| 公开日 | 2024/3/8 |
| IPC主分类号 | G06V10/26 |
| 权利人 | 山东大学 |
| 发明人 | 丛润民; 熊航; 张伟; 元辉; 宋然 |
| 地址 | 山东省济南市历下区经十路17923号 |
专利主权项内容
1.一种原型演化的小样本语义分割方法，其特征在于，包括以下过程：根据支持图像得到支持特征，根据查询图像得到查询特征，利用支持特征创建一个初步原型，结合初步原型和支持掩码，根据查询特征生成一个主要包含前景特征的伪原型；采用伪原型对支持图像进行反向分割，根据反向分割结果将支持图像的基础真值掩模解耦为主区域和辅助区域，得到两个演化原型；从全局背景原型中剔除反映当前前景类的潜在成分，生成自定义背景原型；将查询特征、两个演化原型以及自定义背景原型融合后得到语义分割结果；结合初步原型和支持掩码，根据查询特征生成一个主要包含前景特征的伪原型，包括：对初步原型进行扩展以匹配查询特征的空间维度，将扩展后的初步原型和查询特征进行连接，使用多个卷积层对查询掩码进行初步预测，利用初步预测结果对查询特征执行映射操作，得到包含查询前景特征的伪原型；根据反向分割结果将支持图像的基础真值掩模解耦为主区域和辅助区域，得到两个演化原型，包括：反向分割结果强调支持图像中与查询的前景区域相关的区域，利用反向分割结果，将真实值支持掩码解耦为两个不同的区域，第一个区域包含反向分割结果所覆盖的区域，第二个区域不包含反向分割结果所覆盖的区域；第一个区域为支持掩码和反向分割结果之间的公共区域，反映支持中的区域与查询共享相似的特征，根据第一个区域生成演化后的原型；第二个区域表示支持掩码内反向分割结果外的区域，采用第二个区域生成辅助原型。 来自马-克-数-据-官网