本公开提供了一种基于无监督或弱监督方式的图像分割数据标注方法，包括：S1，获取待标注的图像数据并输入该标注系统；S2，根据待标注的图像数据选择分割任务的数据标注方式，其中，数据标注方式包括无监督标注方式或弱监督标注方式；S3，根据S2中选择的数据标注方式将待标注的图像数据输入至已训练的无监督或弱监督分割标注网络进行标注，生成待标注图像数据的数据标签；S4，输出并存储数据标签。本公开还提供了一种基于无监督或弱监督方式的图像分割数据标注系统。

　　(19)中华人民共和国国家知识产权局 (12)发明专利 (10)授权公告号 CN 112800265 B (45)授权公告日 2022.03.08 (21)申请号 5.2 G06F 16/583 (2019.01) G06N 3/04 (2006.01) (22)申请日 2021.02.01 G06N 3/08 (2006.01) (65)同一申请的已公布的文献号 (56)对比文件 申请公布号 CN 112800265 A CN 110147841 A,2019.08.20 (43)申请公布日 2021.05.14 CN 110147841 A,2019.08.20 (73)专利权人 中国科学院空天信息创新研究院 CN 111368845 A,2020.07.03 地址 100190 北京市海淀区北四环西路19 CN 111915020 A,2020.11.10 号 CN 109741332 A,2019.05.10 (72)发明人 孙显闫志远付琨张伊丹 CN 112181270 A,2021.01.05 毛永强卢宛萱马益杭 审查员 齐智超 (74)专利代理机构 中科专利商标代理有限责任 公司 11021 代理人 周天宇 (51)Int.Cl. G06F 16/58 (2019.01) 权利要求书1页 说明书5页 附图2页 (54)发明名称 一种基于无监督或弱监督方式的图像分割 数据标注方法及系统 (57)摘要 本公开提供了一种基于无监督或弱监督方 式的图像分割数据标注方法，包括：S1，获取待标 注的图像数据并输入该标注系统；S2，根据待标 注的图像数据选择分割任务的数据标注方式，其 中，数据标注方式包括无监督标注方式或弱监督 标注方式；S3，根据S2中选择的数据标注方式将 待标注的图像数据输入至已训练的无监督或弱 监督分割标注网络进行标注，生成待标注图像数 据的数据标签；S4，输出并存储数据标签。本公开 还提供了一种基于无监督或弱监督方式的图像 分割数据标注系统。 B 5 6 2 0 0 8 2 1 1 N C CN 112800265 B 权利要求书 1/1页 1.一种基于无监督或弱监督方式的图像分割数据标注方法，其特征在于，包括： S1，获取待标注的图像数据并输入标注系统； S2，根据所述待标注的图像数据选择分割任务的数据标注方式，其中，所述数据标注方 式包括无监督标注方式或弱监督标注方式，所述无监督标注方式用于对所述待标注图像数 据进行无监督方式标注，自动生成数据标签；所述弱监督标注方式用于对所述待标注图像 数据进行弱监督方式标注，利用人工标注信息与学习规则相结合生成数据标签； S3，根据S2中选择的数据标注方式将所述待标注的图像数据输入至已训练的无监督或 弱监督分割标注网络进行标注，生成所述待标注图像数据的数据标签； 其中，所述无监督分割标注网络为全卷积自适应网络，所述S3包括：采用图像域适应模 块对所述待标注图像数据在像素空间中进行域的变换；采用特征适应模块指导所述图像域 适应模块输出的进行域变后的所述待标注图像数据，生成数据标签； 所述弱监督分割标注网络为Curve‑GCN网络，其中，所述S3包括：采用特征提取模块对 所述待标注图像数据进行特征提取；采用GCN模块获取目标精细边界信息，生成数据标签； S4，输出并存储所述数据标签。 2.根据权利要求1所述的基于无监督或弱监督方式的图像分割数据标注方法，其特征 在于，所述S1中所述待标注的图像数据从本地存储设备获取，输入标注系统。 3.根据权利要求1所述的基于无监督或弱监督方式的图像分割数据标注方法，其特征 在于，所述S4中所述数据标签存储至本地存储设备的硬盘。 4.一种基于无监督或弱监督方式的图像分割数据标注系统，其特征在于，包括： 数据获取单元，用于获取待标注图像数据，并输入该标注系统； 标注方式选择单元，用于根据所述待标注图像数据选择分割任务的数据标注方式，其 中，所述数据标注方式包括无监督标注方式或弱监督标注方式，所述无监督标注方式用于 对所述待标注图像数据进行无监督方式标注，自动生成数据标签；所述弱监督标注方式用 于对所述待标注图像数据进行弱监督方式标注，利用人工标注信息与学习规则相结合生成 数据标签； 标签生成单元，用于根据选择的数据标注方式将所述待标注的图像数据输入至已训练 的无监督或弱监督分割标注网络进行标注，生成所述待标注图像数据的数据标签；其中，所 述无监督分割标注网络为全卷积自适应网络，所述全卷积自适应网络包括：图像域适应模 块，用于对所述待标注图像数据在像素空间中进行域的变换；特征适应模块，用于根据所述 图像域适应模块输出的进行域变后的所述待标注图像数据，生成数据标签；所述弱监督分 割标注网络为Curve‑GCN网络，所述Curve‑GCN网络包括：特征提取模块，用于对所述待标注 图像数据进行特征提取；GCN模块，用于获取目标精细边界信息，生成数据标签 数据存储单元，用于输出并存储该数据标签。 5.根据权利要求4所述的基于无监督或弱监督方式的图像分割数据标注系统，其特征 在于，所述数据获取单元从本地存储设备选取待标注图像数据，并输入该标注系统。 6.根据权利要求4所述的基于无监督或弱监督方式的图像分割数据标注系统，其特征 在于，所述数据存储单元将所述数据标签存储至本地存储设备的硬盘。 2 2 CN 112800265 B 说明书 1/5页 一种基于无监督或弱监督方式的图像分割数据标注方法及 系统 技术领域 [0001] 本公开涉及图像处理技术领域，具体涉及一种基于无监督或弱监督方式的图像分 割数据标注方法及系统。 背景技术 [0002] 随着人工智能相关技术的研究发展，计算机自动生成标注信息的无监督数据标注 方法以及充分利用人工标注信息与学习规则相结合的弱监督数据标注方法成为了急需解 决的关键问题。 [0003] 传统的图像分割数据标注方法需要对图像进行逐一的像素级的精细的数据标注， 这些手动标记的训练集创建起来既昂贵又耗时，通常需要花费许多人数月或者数年的成本 来进行数据的收集、清理和调试，使得强监督信息的获得需要较大的成本。 [0004] 本公开提供的一种基于无监督和弱监督方式的图像分割数据标注方法及系统，能 够极大的降低数据标注的人力资源消耗，提高数据标注的效率，使得数据标注更好的适应 当前人工智能相关技术的发展。 发明内容 [0005] 为了解决现有技术中所存在的数据标注成本大的问题，本公开的第一方面提供了 一种基于无监督或弱监督方式的图像分割数据标注方法，包括：S1，获取待标注的图像数据 并输入标注系统；S2，根据待标注的图像数据选择分割任务的数据标注方式，其中，数据标 注方式包括无监督标注方式或弱监督标注方式，无监督标注方式用于对待标注图像数据进 行无监督方式标注，自动生成数据标签；弱监督标注方式用于对待标注图像数据进行弱监 督方式标注，利用人工标注信息与学习规则相结合生成数据标签；S3，根据S2中选择的数据 标注方式将待标注的图像数据输入至已训练的无监督或弱监督分割标注网络进行标注，生 成待标注图像数据的数据标签；S4，输出并存储数据标签。 [0006] 可选地，S3中无监督分割标注网络为全卷积自适应网络，其中，S3包括：采用图像 域适应模块对待标注图像数据在像素空间中进行域的变换；采用特征适应模块指导输出的 进行域变后的待标注图像数据，生成数据标签。 [0007] 可选地，S3中弱监督分割标注网络为Curve‑GCN网络，其中，S3包括：采用特征提取 模块对待标注图像数据进行特征提取；采用GCN模块获取目标精细边界信息，生成数据标 签。 [0008] 可选地，S1中待标注的图像数据从本地存储设备获取，输入标注系统。 [0009] 可选地，S4中该数据标签存储至本地存储设备的硬盘。 [0010] 本公开的第二方面提供了一种基于无监督或弱监督方式的图像分割数据标注系 统，包括：数据获取单元，用于获取待标注图像数据，并输入该标注系统；标注方式选择单 元，用于根据待标注图像数据选择分割任务的数据标注方式，其中，数据标注方式包括无监 3 3 CN 112800265 B 说明书 2/5页 督标注方式或弱监督标注方式，无监督标注方式用于对待标注图像数据进行无监督方式标 注，自动生成数据标签；弱监督标注方式用于对待标注图像数据进行弱监督方式标注，利用 人工标注信息与学习规则相结合生成数据标签；标签生成单元，用于根据选择的数据标注 方式将待标注的图像数据输入至已训练的无监督或弱监督分割标注网络进行标注，生成待 标注图像数据的数据标签；数据存储单元，用于输出并存储该数据标签。 [0011] 可选地，无监督分割标注网络为全卷积自适应网络，还全卷积自适应网络包括：图 像域适应模块，用于对待标注图像数据在像素空间中进行域的变换；特征适应模块，用于根 据图像域适应模块输出的进行域变后的待标注图像数据，生成数据标签。 [0012] 可选地，弱监督分割标注网络为Curve‑GCN网络，Curve‑GCN网络包括：特征提取模 块，用于对待标注图像数据进行特征提取；GCN模块，用于获取目标精细边界信息，生成数据 标签。 [0013] 可选地，数据获取单元从本地存储设备选取待标注图像数据，并输入该标注系统。 [0014] 可选地，数据存储单元将数据标签存储至本地存储设备的硬盘。 [0015] 本公开提供一种基于无监督或弱监督方式的图像分割数据标注方法及系统，该方 法利用无监督和弱监督的方式，对待标注的图像数据进行自动和半自动的数据标注，在相 同数据标注的任务中，该方法相较于人工数据标注方法可以节省上百倍甚至上千倍的标注 时间，大大的提高了标注的效率，节省了标注的时间。 附图说明 [0016] 为了更完整地理解本公开及其优势，现在将参考结合附图的以下描述，其中： [0017] 图1示意性示出了根据本公开一实施例的基于无监督或弱监督方式的图像分割数 据标注方法的流程图； [0018] 图2示意性示出了根据本公开一实施例的基于无监督方式的图像分割数据标注方 法中全卷积自适应网络结构示意图； [0019] 图3示意性示出了根据本公开一实施例的基于弱监督方式的图像分割数据标注方 法中Curve‑GCN网络结构示意图； [0020] 图4示意性示出了根据本公开一实施例的基于无监督或弱监督方式的图像分割数 据标注系统的框图。 具体实施方式 [0021] 以下，将参照附图来描述本公开的实施例。但是应该理解，这些描述只是示例性 的，而并非要限制本公开的范围。在下面的详细描述中，为便于解释，阐述了许多具体的细 节以提供对本公开实施例的全面理解。然而，明显地，一个或多个实施例在没有这些具体细 节的情况下也可以被实施。此外，在以下说明中，省略了对公知结构和技术的描述，以避免 不必要地混淆本公开的概念。 [0022] 在此使用的术语仅仅是为了描述具体实施例，而并非意在限制本公开。在此使用 的术语“包括”、“包含”等表明了所述特征、步骤、操作和/或部件的存在，但是并不排除存在 或添加一个或多个其他特征、步骤、操作或部件。 [0023] 在此使用的所有术语(包括技术和科学术语)具有本领域技术人员通常所理解的 4 4 CN 112800265 B 说明书 3/5页 含义，除非另外定义。应注意，这里使用的术语应解释为具有与本说明书的上下文相一致的 含义，而不应以理想化或过于刻板的方式来解释。 [0024] 在使用类似于“A、B和C等中至少一个”这样的表述的情况下，一般来说应该按照本 领域技术人员通常理解该表述的含义来予以解释(例如，“具有A、B和C中至少一个的系统” 应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或 具有A、B、C的系统等)。在使用类似于“A、B或C等中至少一个”这样的表述的情况下，一般来 说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如，“具有A、B或C中至少 一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有 B和C、和/或具有A、B、C的系统等)。 [0025] 附图中示出了一些方框图和/或流程图。应理解，方框图和/或流程图中的一些方 框或其组合可以由计算机程序指令来实现。这些计算机程序指令可以提供给通用计算机、 专用计算机或其他可编程数据处理系统的处理器，从而这些指令在由该处理器执行时可以 创建用于实现这些方框图和/或流程图中所说明的功能/操作的系统。本公开的技术可以硬 件和/或软件(包括固件、微代码等)的形式来实现。另外，本公开的技术可以采取存储有指 令的计算机可读存储介质上的计算机程序产品的形式，该计算机程序产品可供指令执行系 统使用或者结合指令执行系统使用。 [0026] 图1示意性示出了根据本公开一实施例的基于无监督或弱监督方式的图像分割数 据标注方法的流程图。 [0027] 如图1所示，该基于无监督或弱监督方式的图像分割数据标注方法包括：S1，获取 待标注的图像数据并输入标注系统；S2，根据待标注的图像数据选择分割任务的数据标注 方式，其中，数据标注方式包括无监督标注方式或弱监督标注方式，无监督标注方式用于对 待标注图像数据进行无监督方式标注，自动生成数据标签；弱监督标注方式用于对待标注 图像数据进行弱监督方式标注，利用人工标注信息与学习规则相结合生成数据标签；S3，根 据S2中选择的数据标注方式将待标注的图像数据输入至已训练的无监督或弱监督分割标 注网络进行标注，生成待标注图像数据的数据标签；S4，输出并存储数据标签。 [0028] 根据本公开的实施例，S1中待标注的图像数据从本地存储设备获取，输入该标注 系统。其中，该待标注的图像数据可以为.jpg、.png、.tif等格式的数据图片。 [0029] 根据本公开的实施例，S4中数据标签存储至本地存储设备的硬盘。 [0030] 本公开的一实施例中，如图2所示，从本地存储设备获取待标注的图像数据输入该 标注系统，利用标注方式选择单元选择无监督标注方式后，该待标注的图像数据输入至已 训练的无监督分割标注网络进行标注，生成生成待标注图像数据的数据标签。其中，该无监 督分割标注网络采用全卷积自适应网络，全卷积自适应网络是一种结合了图像域适应网络 和特征自适应网络的无监督的语义分割结构。图像域适应网络在像素空间中学习从一个域 到另一个域的变换，并且以对抗性学习方式优化特征自适应网络以最大限度地利用学习的 源域和目标域来欺骗域鉴别器。 [0031] 具体地，通过全卷积自适应网络生成待标注图像数据的数据标签包括：采用图像 域适应模块对待标注图像数据在像素空间中进行域的变换，其中，根据给定的两个域的输 入图像，首先利用图像域适应网络从视觉外观的角度将图像从一个域转移到另一个域，视 觉外观往往是域不变的；然后采用特征适应模块指导输出的进行域变后的待标注图像数 5 5 CN 112800265 B 说明书 4/5页 据，生成数据标签，其中，特征适应模块通过最大限度地利用学习的源和目标表示来欺骗域 鉴别器，以对抗方式学习域不变表示，特征适应模块的目标是指导两个域中的表示学习，使 源和目标表示通过域判别器无法区分。 [0032] 本公开的另一实施例中，如图3所示，从本地存储设备获取待标注的图像数据输入 该标注系统，利用标注方式选择单元选择弱监督标注方式后，该待标注的图像数据输入至 已训练的弱监督分割标注网络进行标注，生成生成待标注图像数据的数据标签。其中，该弱 监督分割标注网络采用高效交互式图像标注Curve‑GCN网络，Curve‑GCN网络首先用户对边 界框进行标注，然后在Curve‑GCN中，网络对边界框进行裁剪和编码并生成精细的边界信 息。 [0033] 具体地，通过Curve‑GCN网络生成待标注图像数据的数据标签包括：采用特征提取 模块对待标注图像数据进行特征提取，其中，按照边界框裁剪给定的图片，使用CNN对其进 行编码，目标的n个控制点很好的被表示出来，将n个控制点用直线相连组成一个多边形，用 高阶曲线相连形成一个闭合的曲线；采用GCN模块获取目标精细边界信息，生成数据标签， 其中，将每一个控制点作为一个连续的随机向量，将图像输入到图神经网络中，预测控制点 的位置，最终得到目标的精细的边界信息。 [0034] 需说明的是，根据实际应用需求，本公开实施例中弱监督分割标注网络并不仅限 于全卷积自适应网络，同理，弱监督标注方式也并不仅限于Curve‑GCN网络，其可根据实际 应用进行调整数据标注方式，并根据数据标注方式分别调用相应的分割标注网络。 [0035] 图4示意性示出了根据本公开一实施例的基于无监督或弱监督方式的图像分割数 据标注系统的框图。 [0036] 如图4所示，该基于无监督或弱监督方式的图像分割数据标注系统400包括：数据 获取单元410、标注方式选择单元420、标签生成单元430及数据存储单元440，该系统可以用 于实现参考图1～图3所描述的基于无监督或弱监督方式的图像分割数据标注方法。 [0037] 数据获取单元410，用于获取待标注图像数据，并输入该标注系统。 [0038] 标注方式选择单元420，用于根据待标注图像数据选择分割任务的数据标注方式， 其中，数据标注方式包括无监督标注方式或弱监督标注方式，无监督标注方式用于对待标 注图像数据进行无监督方式标注，自动生成数据标签；弱监督标注方式用于对待标注图像 数据进行弱监督方式标注，利用人工标注信息与学习规则相结合生成数据标签。 [0039] 标签生成单元430，用于根据选择的数据标注方式将待标注的图像数据输入至已 训练的无监督或弱监督分割标注网络进行标注，生成待标注图像数据的数据标签； [0040] 数据存储单元440，用于输出并存储该数据标签。 [0041] 根据本公开的实施例，标签生成单元430中已训练的无监督分割标注网络为全卷 积自适应网络，该全卷积自适应网络包括：图像域适应模块，用于对待标注图像数据在像素 空间中进行域的变换；特征适应模块，用于根据图像域适应模块输出的进行域变后的待标 注图像数据，生成数据标签。 [0042] 根据本公开的实施例，标签生成单元430中弱训练的无监督分割标注网络为 Curve‑GCN网络，该Curve‑GCN网络包括：特征提取模块，用于对待标注图像数据进行特征提 取；GCN模块，用于获取目标精细边界信息，生成数据标签。 [0043] 根据本公开的实施例，数据获取单元从本地存储设备选取待标注图像数据，并输 6 6 CN 112800265 B 说明书 5/5页 入该标注系统。 [0044] 根据本公开的实施例，数据存储单元将数据标签存储至本地存储设备的硬盘。 [0045] 根据本公开的实施例的模块、子模块、单元、子单元中的任意多个、或其中任意多 个的至少部分功能可以在一个模块中实现。根据本公开实施例的模块、子模块、单元、子单 元中的任意一个或多个可以被拆分成多个模块来实现。根据本公开实施例的模块、子模块、 单元、子单元中的任意一个或多个可以至少被部分地实现为硬件电路，例如现场可编程门 阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电 路(ASIC)，或可以通过对电路进行集成或封装的任何其他的合理方式的硬件或固件来实 现，或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实 现。或者，根据本公开实施例的模块、子模块、单元、子单元中的一个或多个可以至少被部分 地实现为计算机程序模块，当该计算机程序模块被运行时，可以执行相应的功能。 [0046] 例如，数据获取单元410、标注方式选择单元420、标签生成单元430及数据存储单 元440中的任意多个可以合并在一个模块中实现，或者其中的任意一个模块可以被拆分成 多个模块。或者，这些模块中的一个或多个模块的至少部分功能可以与其他模块的至少部 分功能相结合，并在一个模块中实现。根据本公开的实施例，数据获取单元410、标注方式选 择单元420、标签生成单元430及数据存储单元440中的至少一个可以至少被部分地实现为 硬件电路，例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系 统、封装上的系统、专用集成电路(ASIC)，或可以通过对电路进行集成或封装的任何其他的 合理方式等硬件或固件来实现，或以软件、硬件以及固件三种实现方式中任意一种或以其 中任意几种的适当组合来实现。或者，数据获取单元410、标注方式选择单元420、标签生成 单元430及数据存储单元440中的至少一个可以至少被部分地实现为计算机程序模块，当该 计算机程序模块被运行时，可以执行相应的功能。 [0047] 附图中的流程图和框图，图示了按照本公开各种实施例的系统、方法和计算机程 序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代 表一个模块、程序段、或代码的一部分，上述模块、程序段、或代码的一部分包含一个或多个 用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所 标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际 上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要 注意的是，框图或流程图中的每个方框、以及框图或流程图中的方框的组合，可以用执行规 定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组 合来实现。 [0048] 本领域技术人员可以理解，本公开的各个实施例和/或权利要求中记载的特征可 以进行多种组合和/或结合，即使这样的组合或结合没有明确记载于本公开中。特别地，在 不脱离本公开精神和教导的情况下，本公开的各个实施例和/或权利要求中记载的特征可 以进行多种组合和/或结合。所有这些组合和/或结合均落入本公开的范围。 [0049] 尽管已经参照本公开的特定示例性实施例示出并描述了本公开，但是本领域技术 人员应该理解，在不背离所附权利要求及其等同物限定的本公开的精神和范围的情况下， 可以对本公开进行形式和细节上的多种改变。因此，本公开的范围不应该限于上述实施例， 而是应该不仅由所附权利要求来进行确定，还由所附权利要求的等同物来进行限定。 7 7 CN 112800265 B 说明书附图 1/2页 图1 图2 8 8 CN 112800265 B 说明书附图 2/2页 图3 图4 9 9

　　2、成为VIP后，下载本文档将扣除1次下载权益。下载后，不支持退款、换文档。如有疑问加。

　　3、成为VIP后，您将拥有八大权益，权益包括：VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。

　　4、VIP文档为合作方或网友上传，每下载1次， 网站将根据用户上传文档的质量评分、类型等，对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档

　　发展生态圈暨无人机全产业链创新示范基地项目可行性研究报告模板立项申批备案.doc

　　2026-2027新人教版小学数学3三年级上册（全册）优秀课件.ppt

　　2024年湖北省中医经典之温病学知识竞赛理论考试题库（附答案）.docx

　　原创力文档创建于2008年，本站为文档C2C交易模式，即用户上传的文档直接分享给其他用户（可下载、阅读），本站只是中间服务平台，本站所有文档下载所得的收益归上传人所有。原创力文档是网络服务平台方，若您的权利被侵害，请发链接和相关诉求至 电线) ，上传者