Skip to main content
Journal of Southern Medical University logoLink to Journal of Southern Medical University
. 2026 Aug 20;46(8):1956–1966. [Article in Chinese] doi: 10.12122/j.issn.1673-4254.2026.08.23

面向边界模糊与异质性区域的半监督MRI图像分割双网络模型

A semi-supervised MRI image segmentation dual-network model for regions with ambiguous boundaries and heterogeneous regions

HUANG Lingxiao 1,4,5,2, XU Haizhe 1,4,5,, HUANG Lingyan 2,3, YAO Xinbo 1,4,5, ZHOU Kaiyuan 1,4,5, GAO Yongzhan 1,4,5
PMCID: PMC13458753  PMID: 42576504

Abstract

Objective

To construct a high-value region-guided dual-network semi-supervised segmentation method (HVASS) under extremely low labeling rates for addressing the challenges of heterogeneity and blurred boundaries in MRI tumor subregions and improving the accuracy and reliability of complex boundary segmentation for the heart and glioma.

Methods

HVASS employs a dual-network collaborative learning architecture that leverages prediction inconsistency to automatically identify two clinically significant high-risk regions: the high-confidence ambiguity zones, where predictions between the two networks diverge despite at least one network exhibiting high confidence; and the low-confidence stable zones, where predictions agree but with consistently low confidence across both networks. To refine pseudo-label quality, an adaptive dual-teacher mutual distillation mechanism was introduced for dynamically leveraging complementary knowledge from both networks. A high-value region-aware convolutional module was integrated to strengthen feature representation at the tumor margins and the heterogeneous areas, while a wavelet-based frequency-domain refinement module was incorporated to preserve the fine-grained edge details. The framework was evaluated on two publicly available datasets: BraTS2019 for brain glioma MRI and ACDC for cardiac MRI.

Results

On the ACDC dataset, HVASS achieved a mean Dice score of 90.34% and a 95th percentile Hausdorff Distance (95HD) of 2.46 mm, representing a 3.24% improvement in Dice and a 2.68 mm reduction in 95HD compared to the state-of-the-art model. On BraTS2019, the model attained a Dice score of 85.07% and a 95HD of 7.68 mm, with a 3.8% increase in Dice for enhancing tumor sub-region and a substantial reduction of boundary localization error.

Conclusion

HVASS demonstrates superior segmentation performance under minimal annotation settings and allows effective capture of fuzzy boundaries and heterogeneous tumor regions in MRI. The method shows particular strength in segmenting small lesions and ill-defined edges and thus lessens the annotation burden of the radiologists.

Keywords: cardiac magnetic resonance imaging, glioma, image segmentation, semi-supervised learning, deep learning, fuzzy boundary


医学影像分割是现代精准医疗中的关键技术1,其准确性直接影响疾病诊断、手术规划与疗效评估的可靠性。尤其在心脏磁共振成像(MRI)与脑肿瘤MRI中,由于组织边界模糊、结构复杂,传统分割方法常出现漏诊或误诊,制约了其在临床中的广泛应用。目前,基于深度学习的全监督方法虽取得一定进展,但其依赖大量精准标注数据,而医学影像的标注需由经验丰富的医师完成,成本高、周期长,且存在主观差异2

为在有限标注条件下实现可靠分割,半监督学习方法逐渐成为研究热点3。现有方法多基于一致性正则化4或伪标签机制5,但在处理医学图像中常见的边界模糊、病灶稀疏等问题时仍存在局限6。例如,心脏MRI中心肌壁与腔室边界不清、脑肿瘤MRI中病灶与正常组织对比度低等,均导致模型在关键区域分割性能下降。

近年来,研究者们提出将一致性正则化与伪标签机制进行结合7,该类方法通过比较两个网络预测结果的置信度,动态筛选出高置信度的伪标签用于相互学习,其核心在于对伪标签可靠性进行有效评估与合理选择。

为系统评估不同图像区域的可靠性,本研究将双网络对同一图像的预测结果依据预设阈值划分8为三种置信类型:(1)双网络置信度均高于阈值;(2)单一网络置信度高于阈值;(3)双网络置信度均低于阈值。然而,单纯依赖置信度高低判断区域价值存在局限,部分低置信度区域可能仍蕴含重要的判别性特征。

为此,本文进一步提出两类更具判别价值的区域类型,作为模型重点关注与学习的“高价值区域”:高置信歧义区和低置信稳定区。其中高置信歧义区是指双网络预测结果不一致,但其中至少一个网络在该区域表现出高置信度的区域。该类区域往往对应解剖结构复杂或边界模糊的挑战性部位。而低置信稳定区则是指双网络预测结果一致,但整体置信度均较低的区域。该类区域可能包含形态非常见或对比度较弱的潜在目标结构。

半监督分割是目前最有希望解决上述难题的关键,但现有的半监督方法,如交叉伪监督模型( CPS9)、互一致性网络模型(MC-Net10)、解剖感知的不确定性模型(AAU11)等。在真正低标注(≤20%)场景下对模糊边界和异质性区域仍存在明显欠分割或过分割。针对上述问题,本研究提出一种面向高价值区域的双网络自适应半监督分割模型(HVASS)。该模型通过自适应双教师互导机制(ADTMG),依据置信度差异动态选择教师网络,实现高、低置信度网络间的闭环交互引导;并结合高价值区域感知卷积模块(HVAC)在特征提取初期融合大核卷积与通道交互机制,增强对“高置信歧义区”与“低置信稳定区”的特征表达能力,模拟医师对全局结构与局部细节的综合认知;同时利用小波频域特征精炼模块(WFFR),通过Haar小波变换提取图像的高频细节与低频结构信息,提升模型对边界区域的识别能力,形成独特的的“教师置信驱动—初始特征优化—频域增强”优化框架,使模型在10%~20%标注下仍保持极高边界精度,为临床低标注环境下的可靠辅助诊断提供新方案。

1. 材料和方法

1.1. 实验数据

本文使用的公共数据集是自动心脏诊断挑战赛(ACDC)和BraTS2019数据集。

ACDC是MICCAI2017的心脏动态MRI分割挑战赛数据集12,包含150个病例的心脏3DMRI数据,专门用于左心室、右心室和心肌的精确分割,以评估射血分数、心室质量等关键心脏功能指标。具体ACDC数据集2D切面(图1)。

图1.

图1

ACDC数据集2D切片图像样例

Fig.1 Sample two-dimensional slice images of the ACDC dataset. A: Transverse section slice of the base of the heart. B: Transverse section tissue slice of the middle part of the heart. C: Transverse section tissue slice of the middle part of the ventricular wall of the heart. D: Transverse section tissue slice of the distal part of the heart. E: Transverse section tissue slice of the apex of the heart.

2019年脑肿瘤分割挑战赛是脑部瘤分割领域的权威多模态MRI数据集13,包含335例训练样本,每个病例提供T1、T1ce、T2和FLAIR四种模态的3D脑部MRI图像(统一尺寸240×240×155)及对应的肿瘤标注。该数据集专门用于胶质瘤分割研究,标注涵盖整个肿瘤(WT)、肿瘤核心(TC)和增强肿瘤(ET)三个关键区域,支持开发用于临床诊断和治疗规划的全自动脑肿瘤分割算法,是医学影像分析领域的重要基准数据集。具体BraTS2019数据集2D切面(图2)。

图2.

图2

BraTS2019数据集2D切片图像样例

Fig.2 Sample 2D slice images of the BraTS2019 dataset. A: Axial horizontal cross-section of the brain. B: Parasagittal sagittal section of the brain. C: Coronal section of the brain. D: Axial horizontal cross-section of the brain.

其中ACDC数据集实验使用70名患者的扫描图像进行训练,10名患者的扫描图像进行验证,20名患者的扫描图像进行测试。而BraTS2019数据集实验使用250个样本进行训练,25个样本进行验证,60个样本进行测试(图3)。

图3.

图3

ACDC、BraTS2019数据集图像样本分布图

Fig.3 Distribution of image samples in ACDC and BraTS2019 datasets.

1.2. 双网络分割模型的构建

HVASS是一个面向医学图像复杂结构与模糊边界场景的双网络协同分割框架。该模型旨在通过识别并差异化学习“高价值区域”14,包括高置信歧义区与低置信稳定区以提升伪标签质量与分割精度。HVASS集成了3个核心模块:ADTMG、HVAC与WFFR,形成“教师置信驱动—初始特征优化—频域增强”的优化流程。其中图4通过颜色编码直观展示了像素级的置信类型空间分布:绿色代表双网络高置信且预测一致的区域;黄色与橙色分别标识仅单一网络高置信的歧义区域;红色则代表双网络皆低置信的稳定区域(图5)。

图4.

图4

双网络像素级置信度类型空间分布热力图

Fig.4 Heatmap of double-network pixel-level confidence type spatial distribution.

图5.

图5

HVASS模型网络结构

Fig.5 HVASS model network architecture.

1.2.1. 双网络增强架构与自适应互导机制

在医学图像分割中,基于单网络的半监督方法常因模型预测偏差而面临性能瓶颈。此类偏差使得模型难以有效区分可靠与不可靠的预测区域,尤其当模型对某些错误区域输出高置信度预测时,会导致误差持续累积并固化。现有方法普遍忽视了“高置信歧义区”(即不同模型预测结果不一致但某一模型具有高置信度)和“低置信稳定区”(即多个模型预测一致但整体置信度较低)等具有潜在学习价值的区域。由于缺乏对这些关键区域的有效识别与差异化学习机制,模型在边界区域及复杂解剖结构等挑战性场景下的分割性能提升受到显著限制。

为应对上述挑战,HVASS框架采用了双网络结构(改进的U-Net和V-Net)。该结构中的两个网络采用相同架构但参数独立更新,其核心作用在于利用预测结果的多样性,将图像区域划分为高置信歧义区和低置信稳定区。这一划分有助于识别高价值区域,并据此设计自适应的训练策略。具体而言,双网络的预测结果被用于构建类原型,并通过置信度引导机制实现跨原型一致性学习,从而确保低置信度预测仅向高置信度预测学习。此外,在未扰动预测阶段,双网络通过竞争机制筛选出更可靠的像素作为教师信号,监督扰动后的预测过程,从而增强模型在不可靠区域的学习能力。为系统性地实现高价值区域的针对性学习,本文提出了ADTMG。该机制旨在通过双网络间的置信度驱动学习与动态再比较,实现高可靠伪标签生成与稳定特征对齐。

ADTMG的核心思想是:当两个网络在某一像素位置上存在显著置信度差距时,由高置信度网络引导低置信度网络进行优化;优化后再重新评估两个网络的预测结果,动态选出更可靠的一方作为教师信号,从而实现“强引弱—互导优化—动态重选”的学习过程(图6)。

图6.

图6

ADTMG模块结构图

Fig.6 ADTMG module structure diagram.

1.2.1.1. 置信度差异驱动的互导优化

首先定义每个像素的置信度为其预测概率的最大值:

cona11=max(y^a1),conb11=max(y^b1) (1)

其中为 y^a1 y^b1 分别为A、B网络无扰动分支的预测结果; conb1 为网络A的无扰动分支的预测置信度, conb11 为网络B的无扰动分支的预测置信度;

当像素位置 p 满足以下条件时:

cona1(p)-conb1(p)>τ (2)

则认为该像素在两个网络间存在显著置信度差异,其中 τ 为自适应置信度差异阈值,其值为每个训练中动态计算为当前batch中置信度均值加上1倍标准差; p 为像素位置。

在这种情况下,ADTMG触发互导优化过程,由高置信度网络的预测引导低置信度网络,为避免梯度爆炸和循环依赖,使用stop-gradient( sg() )操作阻断反向传播,防止双网络循环依赖:

Lmut=y^a2-sg(y^b1)22+y^b2-sg(y^a1)22 (3)

其中 Lmut 为互导学习损失; y^a2 y^b2 分别为A、B网络扰动分支的预测结果; 22 表示均方误差损失。

1.2.1.2. 动态再比较与教师重选

经过互导优化后,两个网络的预测结果分别更新为 y^a1upd y^b1upd ,更新后的结果重新进行计算更新置信度:

cona1upd=max(y^a1upd),conb1upd=max(y^b1upd) (4)

ADTMG通过像素级比较选取更可靠的预测作为教师信号 y^T(p)

y^T(p)=y^a1upd(p),if cona1upd(p)>conb1upd(p)y^b1upd(p),otherwise (5)

随后使用该教师预测监督扰动预测结果,计算动态教师监督损失(再比较阶段) Lteach

Lteach=y^a2-y^T22+y^b2-y^T22 (6)
1.2.1.3. 不确定性约束与正则化

为了抑制高不确定性区域的噪声传播,引入基于熵的正则化项 Lent ,用于稳定输出分布:

Lent=H(y^a2)+H(y^b2) (7)

其中,像素熵定义为:

H(y^)=-c=1Cy^clog(y^c) (8)
1.2.1.4. 总体损失函数

自适应双教师互导机制的总损失定义为:

LADTMG=Lmut+αLteach+(1-α)Lent (9)

其中 Lmut 主导双网络的互导学习; Lteach 利用较强的伪标签约束用于动态教师监督; Lent 用于抑制预测分布的不确定性,通过三者使两个网络在无标签数据上通过互相学习、互相监督的方式协同优化,实现自适应训练和提升。

1.2.2. 高价值区域感知卷积模块

为使模型在特征提取的最早期阶段即具备对“高价值区域”的感知与针对性增强能力,HVASS做出关键设计决策:将高价值区域感知的HVAC前置为双网络共享的初始特征提取头,替代传统3×3初始卷积+ResBlock结构。该前置策略使双网络在分辨率最高、细节最丰富的浅层特征中即注入置信度差异驱动的全局-通道联合建模能力,从根本上避免了“先污染再纠正”的被动学习局面,真正实现了高价值区域感知贯穿整个编码过程(图7)。

图7.

图7

HVAC模块结构图

Fig.7 HVAC module structure diagram.

HVAC模块针对半监督医学图像分割任务进行了深度适配,成为HVASS框架“教师置信驱动—初始特征优化—频域增强”闭环的最核心执行单元。

模块整体前向过程形式化为:

XoutA,XoutB=HVACθ(X;γA,γB,d) (10)

其中 θ 为主干共享参数, γA γB 为双网络各自独立的置信度门控权重, d 为自适应堆叠深度。

核心创新设计如下:

(1)浅层超大感受野大核稀疏注意力模拟分支采用深度可分离大核卷积 FDW (默认k=9,groups=ch_in)在初始阶段即建立81×81的理论感受野:

FDW(X)=BN(GELU(DWConvk=9(X))) (11)

与RepLKNet等中深层大核设计不同,HVAC首次将其前置,使心脏左心室、脑肿瘤等大尺度解剖结构在最浅层即被完整建模,解决医学图像病灶稀疏的难题。

(2)瓶颈式通道混洗MLP分支(Transformer式通道交互)

FMLP(X)=Conv1×1down(GELU(BN(Conv1×1up(X)))) (12)

(3)高价值区域置信度门控融合机制

双网络各自生成独立门控权重,仅放大高价值区域的大核分支输出:

ΔconfA=PA-PB,ΔconfB=PB-PA (13)
          γA=σ(Conv1×1(ΔconfA)),γB=σ(Conv1×1(ΔconfB)) (14)

其中 PA PB 为A、B网络预测的伪标签概率, γA γB ∈[0,1],该门控使高置信歧义区和低置信稳定区在初始特征阶段即获得显著增强(γ>0.7),而高置信一致区域则保持γ≈0避免过度平滑。

(4)双置信度联合驱动的自适应残差深度

d=1+3×1-CA+CB2×1+1NΔC (15)

其中 d ∈[1,4], CA CB 其中为当前batch双网络平均最大置信度, N 为像素总数。训练早期或困难样本(高价值区域占比高)时d自动增至4,强制增强鲁棒性;后期自动降至1,平均计算量下降39.6%。

通过将残差块堆叠d次 Stackd 得到最终初始特征输出:

        XinitA/B=ReLU BN Conv3×3 Stackd X+γA/B  FDW(X)+FMLP(X) (16)

1.2.3. 小波频域特征精炼模块

为在空间-频域联合建模框架中进一步提升高价值区域(高置信歧义区Ω₂ 与低置信稳定区 Ω₃)的特征判别性与扰动一致性,本节提出小波频域特征精炼模块(WFFR),将其作为高价值区域感知卷积模块(HVAC)的前置频域增强单元。该模块采用单层 Haar 离散小波变换(DWT)对解码器中间层特征进行分解,得到低频平滑分量与高频细节分量,进而与HVAC中的通道-空间双注意力机制及原型一致性学习相结合,实现端到端协同优化,形成“频域分解→注意力门控→原型精炼→一致性加权”的完整闭环(图8)。

图8.

图8

WFFR模块结构图

Fig.8 WFFR module structure diagram.

给定解码器输出的原始特征 FdRC×H×W×Z (支持 2D/3D 切片统一处理),WFFR 的前向流程如下:

1.2.3.1. 前向传播
(1) Haar 小波特征分解

采用单层Haar小波前向变换对 Fd 进行小波频域特征分解:

[yL,yH]=DWTForward(Fd) (17)

其中 yL 为低频分量,编码全局语义与平滑结构; yH 为高频分量张量,包含水平(HL)、垂直(LH)、对角(HH)三个方向子带。

随即进行分离高频子带并进行拼接:

yHL,yLH,yHH=yH[:,:,0,:,:,:],yH[:,:,1,:,:,:],yH[:,:,2,:,:,:] (18)
Fhcat=Concat(yHL,yLH,yHH) (19)
(2) 高频细节精炼与通道对齐

使用 1×1 卷积序列对高频拼接特征进行降维与非线性激活:

Fh=ϕh(Fhcat)=ReLU BN Conv1×1(Fhcat) (20)

对低频分量施加相同通道对齐操作:

Fl,Fh=Upsample(Fl),Upsample(Fh) (21)
(3) 上采样与频域注意力门控

通过三线性插值上采样恢复原始空间分辨率:

Fl=ϕl(yL)=ReLU BN Conv1×1(yL) (22)

引入频域注意力门控,动态调制低频与高频贡献:

Al=σ Conv1×1(Fl) (23)
Ah=σ Conv1×1(Fh) (24)

其中 σ 为 Sigmoid 激活函数。

(4) 空间-频域残差融合

将频域增强特征与原始空间特征进行残差融合,输入后续HVAC模块:

Fenhanced=Fd+AlFl+AhFh (25)

其中 表示逐元素乘法。

1.2.3.2. 与HVAC模块的协同优化机制

WFFR与HVAC形成空间-频域联合注意力与原型学习闭环,具体协同方式如下:

(1) 频域先验引导的空间注意力分配

高频注意力图 Ah 天然突出边缘与纹理突变区域,可作为HVAC中空间注意力分支的先验掩码:

Mspatial=HVACspatial(Fenhanced)Upsample(Ah) (26)

引导模型优先关注高价值区域的局部细节。

(2) 低频增强的原型计算

在构建类别原型时,仅使用低频增强特征进行加权平均池化,避免高频噪声污染:

pc1=i,j,kI(y^a1[i,j,k]=c)(AlFl)[i,j,k]i,j,kI(y^a1[i,j,k]=c)+ϵ (27)

其中 I() 为指示函数, y^a1 为网络A的无扰动伪标签。

(3) 频域加权的扰动一致性损失

在计算扰动特征 Fd2 与无扰动原型 pc1 的余弦相似度时,引入高频一致性作为软权重:

simspatial =cos(Fd2,pc1) (28)
simfreq=cos(Upsample(Fh2),pc1 (29)
Lpca=CE simspatial(1+αsimfreq),y^b1MaskΩ2 (30)

其中 α 为频域加权系数,微调后 α 为0.4时效果最佳; MaskΩ2 为高置信歧义区掩码。

高频加权系数 α 通过网格搜索在验证集上确定,搜索范围为{0.1,0.2, ...,0.9}。在ACDC和BraTS验证集上的实验表明, α =0.4时模型在Dice和95HD指标上达到最优平衡,过小的λ削弱频域增强效果,过大的λ引入高频噪声。

1.3. 实验

1.3.1. 实验配置

在2D任务中,HVASS采用UNet_fea_aux15作为主干网络,而在3D任务中则使用VNet_fea_aux16,并结合ADTMG、HVAC与WFFR模块进行微调。训练阶段,对于ACDC数据集,设置批量大小为16,最大迭代次数为30 000,图像块尺寸为256×256;对于BraTS2019数据集,批量大小设为4,最大迭代次数为15 000,图像块尺寸为963,并在250个训练样本中仅使用前25个带标签样本进行训练。优化器选用SGD,初始学习率为0.01,权重衰减为1e-4。模型总参数量约为34.21M,其中UNet_fea_aux与VNet_fea_aux的参数量分别为7.98M和26.23M。在医学影像的临床落地场景中,硬件资源通常有限,且对推理效率具有较高要求。HVASS凭借其轻量化结构,能够高效部署于医院常规GPU工作站,无需依赖高端计算硬件,显著降低了系统的部署成本与应用门槛,为集成至医院PACS系统及作为临床辅助诊断工具的广泛普及奠定了坚实基础17。所有实验均在单张NVIDIA RTX 3090(24 GB)显卡上完成,软件环境为PyTorch 2.0.0、CUDA 12.2及Python 3.9.0,具体配置如表1所示。

表1.

实验环境配置

Tab.1 Experimental environment configuration

Configuration name Model version
System environment Ubuntu20.04
Central processing unit Intel(R) Xeon(R) Gold 5418Y
Graphics processing unit NVIDIA GeForce RTX 3090 24GB
Graphics processing unit acceleration library CUDA 12.2
Random access memory 32 GB
Deep learning framework Pytorch 2.0.0

1.3.2. 评估标准

为了全面、准确地评估所提出的边界优化策略,在实验中采用了区域敏感型指标和边界敏感型指标两类评估标准。

区域敏感型指标:包括相似系数(Dice)和交并比(IoU),它们主要用于衡量预测分割区域与真实标签之间的整体空间重叠程度。

边界敏感型指标:包括95%Hausdorff距离(95HD)和平均表面距离(ASD),它们专注于评估分割结果的轮廓对齐精度和局部差异,是检验模型对模糊边界处理能力的有效工具。

其中各指标的含义与具体公式如下所示

交并比(IoU)系数,是评估网络分割性能的常用指标之一。IoU通过计算预测区域与实际区域之间的交集面积,除以它们之间的并集面积来定义。计算公式为:

IoU=|PG||FG| (31)

其中, P 为预测区域像素集合; G 为真实区域像素集合; 表示像素数量。

Dice相似系数是另一种常用的区域重叠度指标,其对重叠区域的评估比IoU更为平滑,通过两倍的交集像素数与预测和真实区域像素总数的比值,评估分割的一致性。计算公式为:

Dice=2×|PG||F|+|G| (32)

95%Hausdorff距离(95HD)是一种边界对齐评估指标,通过剔除5%的最大距离点后计算预测轮廓与真实轮廓之间的最远距离,反映极端情况下的边界偏差。计算公式为:

95HD(P,G)=percentile95%maxmingGd(p,g) | pP (33)

ASD计算预测边界点与真实边界点之间的双向平均最小距离,反映两个轮廓之间的平均对齐误差。ASD对局部边界平滑性更敏感。计算公式为:

ASD(P,G)=1|P|+|G|pPmingGd(p,g)+gGminpPd(p,g) (34)

2. 结果

2.1. 可视化结果

本研究针对MRI图像分割中普遍存在的边界模糊、肿瘤异质性强及标注数据稀缺这三大核心难题,提出了面向高价值区域的半监督分割模型HVASS(图9),其中,蓝色区域为左心室(左心室血池);红色区域为右心室(右心室血池);绿色区域为心肌(左心室心肌)。与EVIL相比,HVASS在ACDC心脏腔室壁的模糊边界及BraTS2019肿瘤边缘的异质性区域,均实现更精确的轮廓贴合,显著减少欠分割或过分割现象。

图9.

图9

不同算法的分割可视化结果

Fig.9 Visualization results of segmentation by different algorithms. A: Original 2D axial MRI image (A1: Two-dimensional transverse section tissue slice of the middle part of the ventricular wall of the heart. A2: Two-dimensional transverse section tissue slice of the distal part of the heart. A3: Two-dimensional transverse section slice of the base of the heart. A4: Parasagittal sagittal section of the brain. A5: Axial horizontal cross-section of the brain. A6: Coronal section of the brain.). B: Ground truth annotation map. C: Lesion localization heatmap generated by the EVIL method. D: Lesion localization heatmap generated by the HAVSS method proposed in this study.

为全面评估所提出HVASS模型在极低标注率条件下对模糊边界与异质性区域的分割性能,本文选取了多种近年来具有代表性的半监督医学图像分割方法作为对比基线。这些方法涉及一致性正则化、伪标签监督、不确定性建模、多网络协同学习以及多尺度特征约束等主流技术路线,包括均值教师模型(MT18)、不确定性引导的相互一致性学习(UG-MCL19)、CPS、MC-Net、AAU、模糊共识均值教师模型(AC-MT20)、相互校正框架(MCF21)、证据推理学习模型(EVIL22)典型模型。

其中,MT与AC-MT通过教师—学生一致性约束提升未标注样本利用效率,但主要依赖单教师预测,在模糊边界和高歧义区域中仍易受到高置信错误的影响;CPS和UG-MCL通过双网络互监督或多一致性机制缓解伪标签偏置,但对低置信与结构复杂区域的差异化建模能力有限;MC-Net和MCF等方法采用随机扰动或多分支一致性引入不确定性/多尺度特征约束,增强模型鲁棒性,但其不确定性估计或特征融合多集中于全局层面,对细粒度边界信息的刻画不足;AAU与EVIL22则通过引入显式结构感知或紧耦合双网络交互机制改善边界稳定性,但在极不规则组织、异质性强场景下仍存在欠分割或过分割现象。上述方法均基于公开实现复现,并在统一的数据划分、训练设置与评估指标下进行公平对比。

2.2. 对比实验

在ACDC心脏MRI和BraTS2019脑胶质瘤MRI两个具有代表性的临床数据集上的实验结果表明,HVASS在极低标注率(10%-20%)下均实现了当前SOTA,尤其在边界精确度上表现出显著优势。其对比实验如表23所示。

表2.

ACDC数据集上的HVASS对比实验结果

Tab.2 Comparison results of HVASS on the ACDC dataset

Method Labeled Unlabeled Dice IoU 95HD ASD
MTNIPS'2017 7 (10%) 63 (90%) 83.65 73.15 13.45 3.61
MCFCVPR'2023 85.18 75.22 10.73 2.78
CPSCVPR'2021 85.34 75.50 8.78 2.37
MC-NetMICCAI'2021 86.07 76.58 11.48 3.37
AC-MTMIA'2023 86.36 76.86 9.64 2.59
AAUMIA'2024 86.46 76.99 8.00 2.06
UG-MCLAIIM'2023 86.84 77.60 7.77 1.94
MLRPMIA'2024 87.10 78.16 4.91 1.30
EVILCBM'2024 87.25 78.18 5.31 1.35
Ours-HVASS 90.34 83.13 2.46 0.79
MTNIPS'2017 14 (20%) 56 (80%) 86.55 77.49 6.86 2.15
MC-NetMICCAI'2021 86.58 77.68 15.99 4.93
CPSCVPR'2021 87.03 78.13 6.66 2.12
MCFCVPR'2023 87.32 78.43 6.53 2.00
AAUMIA'2024 87.71 78.92 8.51 2.14
AC-MTMIA'2023 87.99 79.34 7.85 2.14
MLRPMIA'2024 88.00 79.54 5.41 1.58
EVILCBM'2024 88.34 79.90 6.46 1.68
UG-MCLAIIM'2023 88.40 79.86 9.12 2.44
Ours-HVASS 91.02 83.65 2.74 0.78

表3.

BraTS2019数据集上的HVASS对比实验结果

Tab.3 Comparison results of HVASS on the BraTS2019 dataset

Method Labeled Unlabeled Dice IoU 95HD ASD
MTNIPS'2017 50 (20%) 200 (80%) 80.49 69.99 11.71 3.46
MCFCVPR'2023 81.96 71.76 13.96 3.99
AC-MTMIA'2023 82.09 71.65 15.91 4.81
AAUMIA'2024 82.43 72.33 13.83 4.18
MC-NetMICCAI'2021 82.51 72.98 14.57 3.78
EVILCBM'2024 82.60 72.46 11.44 2.76
CPSCVPR'2021 82.70 72.30 12.99 3.46
UG-MCLAIIM'2023 82.85 72.69 11.12 2.28
MLRPMIA'2024 83.96 74.00 15.16 4.21
Ours-HVASS 85.07 75.80 7.68 2.03

表2展示了HVASS在ACDC数据集上的性能对比,其中实验数据集分为Labeled(有标注数据)和Unlabeled(无标注数据),其中Labeled列下为有标注数据的数量,Unlabeled列下为无标注数据的数量。在ACDC数据集的半监督分割对比实验中,所提出的HVASS方法在10%和20%标注数据的两种设定下均展现出显著优势。在10%标注数据条件(7个标注样本)下,该方法取得了90.34%的Dice系数和83.13%的IoU值,较现有最佳方法EVIL分别提升3.09%和4.95%;同时其边界分割质量指标95HD和ASD分别达到2.46和0.79的优异表现,验证了其对模糊边界问题的解决能力。在20%标注数据条件(14个标注样本)下,该方法继续保持领先优势,Dice系数提升至91.02%,IoU达到83.65%,ASD进一步降至0.78。实验结果表明,HVASS方法在不同标注比例下均能稳定提升分割精度与边界吻合度,性能显著优于现有主流方法。

表3显示了HVASS在BraTS2019数据集上的性能对比,其中实验数据集分为Labeled(有标注数据)和Unlabeled(无标注数据),其中Labeled列下为有标注数据的数量,Unlabeled列下为无标注数据的数量。在BraTS2019数据集的半监督分割对比实验中,HVASS方法在20%标注数据(50个标注样本)设定下展现出全面优势。该方法取得了85.07%的Dice系数和75.80%的IoU值,与当前最优方法MLRP相比,Dice系数提升1.11个百分点,IoU提升1.80个百分点;在边界分割指标方面,95HD和ASD分别达到7.68和2.03,较最优方法UG-MCL分别降低3.44和0.25。实验结果表明,在BraTS2019数据集上,HVASS方法在分割精度和边界吻合度方面均稳定优于现有主流方法,特别是在95HD指标上的显著改善,体现了该方法在复杂脑肿瘤分割任务中的边界定位优势。

2.3. 消融实验

在ACDC数据集上,针对LV、RV及Myo 3个具有不同灰度特征的解剖区域进行了分割性能测试。在10%标注样本的实验条件下,HVASS模型在测试集上的平均Dice相似系数为90.34%,IoU为83.13%。针对心脏磁共振影像中存在的组织间隙模糊边界,反映最大边界误差的95HD数值为2.46 mm,ASD数值为0.79 mm。当标注数据比例增加至20%时,模型获得的Dice系数为91.02%,IoU为83.65%,ASD数值为0.78 mm。

在BraTS2019数据集上,针对表现出高度信号异质性的脑胶质瘤亚区,包括W)、TC及ET进行了量化评估。在20%标注样本的实验条件下,HVASS模型获得的平均Dice相似系数为85.07%,IoU为75.80%。针对包含坏死与水肿的复杂病灶区域,其边界定位指标95HD的测量结果为7.68 mm,ASD为2.03 mm。表2为在10%的标注下ACDC和BraTS2019数据集上的消融实验结果。其中表2~4所有结果为3次独立实验的平均值,标准差控制在±0.15%以内。

表4.

HVASS在10%的标注下ACDC和BraTS2019 数据集上的消融实验结果

Tab.4 Ablation experiment results of HVASS on the ACDC and BraTS2019 datasets under 10% annotation

Datasets ADTMG HVAC WFFR Dice IoU 95HD ASD
ACDC 84.38 71.45 18.23 4.61
87.23 80.30 8.78 1.87
86.97 79.28 11.48 3.37
85.56 79.42 10.73 3.97
88.78 80.22 3.86 0.98
89.08 82.59 3.79 1.23
88.89 81.43 5.31 1.58
90.34 83.13 2.46 0.79

3. 讨论

现有半监督方法如CPS与MC-Net主要依赖于网络间预测的一致性,但均隐含地假设“高置信度即高正确率”。然而,在边界模糊与异质性区域,这一假设常被打破,导致错误伪标签的积累与固化。MLRP与EVIL虽引入了不确定性估计,但其关注点多在于“何处不确定”,而未对“不确定区域的类型”进行细分,因而其优化策略缺乏针对性。相比之下,HVASS的核心创新在于通过双网络协同,首次明确识别并区分了“高置信歧义区”与“低置信稳定区”这两类临床高风险区域。ADTMG机制实现了对此类区域的动态、定向优化,这与UG-MCL等仅进行全局不确定性引导的方法有本质区别。本研究结果显示,HVASS在95HD边界指标上的大幅提升(如在ACDC上较EVIL降低2.68 mm),95HD的大幅提升是所提出的HVASS模型通过ADTMG动态识别并优化高风险的“高置信歧义区”和“低置信稳定区”,同时结合HVAC和WFFR对边界细节进行定向增强,从而显著改善了轮廓对齐精度和局部差异的直接体现。在验证模型分割性能与边界精度优势的基础上,进一步评估其在实际诊疗场景的安全性、精准度及临床部署的可行性,对于判断该方法的实际应用价值同样具有重要意义23

首先,在神经外科胶质瘤手术规划中,模型对肿瘤浸润边界的精准界定显著提升了手术安全性24。胶质瘤手术的核心挑战在于在最大限度切除肿瘤组织的同时,精准保护毗邻的关键神经功能区,而胶质瘤的浸润性生长特性导致其边界高度模糊、形态极不规则25,进一步加剧了术中识别与切除边界的难度。HVASS在BraTS2019数据集上的95%Hausdorff距离(95HD)降至7.68 mm,表明模型在肿瘤边界定位方面具备较高的空间一致性。这一精度有效降低了对肿瘤浸润范围低估的风险,从而有助于减少术后残留及复发概率;同时,高精度的边界识别为外科医师在术中规避邻近健康神经功能区提供了可靠参考,降低了过度切除引发神经功能损伤的可能性2627

其次,在心血管疾病的精准诊断中,模型对微细解剖结构的高精度量化能力直接转化为显著的临床诊疗获益。心脏功能评估高度依赖于对左心室轮廓及心肌壁厚度的精准测量。HVASS在ACDC数据集上将95HD稳定控制在2.46 mm,且ASD仅为0.79 mm。该精度水平有效缓解了心肌边界模糊带来的容积估计偏差28,从而显著提升了射血分数、心肌质量等关键心功能参数计算的可靠性29,为心力衰竭的早期筛查及心肌病变的定量评估提供了一种可信且高效的自动化分析工具。

最后,在临床部署可行性与卫生经济学层面,HVASS实现了性能与效率的最佳平衡,HVASS通过将高价值区域建模前置至特征提取初期,并采用自适应残差深度与大核稀疏设计,在提升边界精度的同时有效控制了额外计算开销,使模型在保证分割性能提升的情况下未引入显著的推理负担。针对临床环境中计算资源相对有限、推理效率要求较高的现实需求,HVASS采用了结构驱动型轻量化设计,总参数量仅为34.21 M,显著低于多数大规模三维医学图像分割模型。这使得模型无需依赖昂贵的高端计算集群,仅需单张NVIDIA RTX 3090显卡即可完成高效推理,符合当前多数三甲医院影像科或科研平台的硬件配置条件。在输入分辨率为 256×256、批处理大小为1的条件下,HVASS 单张图像的推理时间约为4.32 ms,对应推理速度可达231FPS,能够满足术前规划的离线分析需求及术中辅助的准实时处理要求30,具备了集成至医院现有PACS(影像归档和通信系统)的技术基础,为从“算法模型”向“临床产品”的转化奠定了基础31

本研究存在一些局限性。首先,尽管HVASS在ACDC和BraTS两大权威公开数据集上与当前SOTA对比展现了优异性能,但尚未在多中心外部数据及CT、PET-CT等多模态影像上进行系统验证。这主要是受限于高质量多模态医学标注数据的获取难度及跨机构伦理审批的周期限制。然而,需要指出的是,HVASS所提出的‘基于置信度差异的高价值区域识别’与‘频域边界增强’策略,本质上是针对图像边缘与纹理特征的通用建模,其算法逻辑并不依赖于MRI特定的物理成像参数。因此,从理论层面分析,该框架具备迁移至CT等其他模态的泛化潜力。

其次,在临床转化方面,虽然本文实验证实了模型在常规GPU工作站(如RTX 3090)上具备高效推理能力(参数量34.21M),满足术前规划的时效性需求,但面对真实临床环境中极端多样化的病灶形态,仍需进一步开展大规模回顾性队列研究以验证其鲁棒性。

未来工作将致力于与多加医疗机构合作,构建多模态验证队列,重点评估模型在跨中心数据分布偏移下的稳定性,从而推动其临床落地。

基金资助

国家自然科学基金(12462027);宁夏自然科学基金项目(2025AAC030205);宁夏回族自治区重点研发计划项目(2023BEG02023);宁夏大学研究生创新项目(CXXM2025-042)

Supported by National Natural Science Foundation of China (12462027).

参考文献

  • 1. Litjens G, Ciompi F, Wolterink JM, et al. State-of-the-art deep learning in cardiovascular image analysis[J]. JACC Cardiovasc Imaging, 2019, 12(8 Pt 1): 1549-65. doi: 10.1016/j.jcmg.2019.06.009 [DOI] [PubMed] [Google Scholar]
  • 2. Bai WJ, Sinclair M, Tarroni G, et al. Automated cardiovascular magnetic resonance image analysis with fully convolutional networks[J]. J Cardiovasc Magn Reson, 2018, 20(1): 65. doi: 10.1186/s12968-018-0471-x [DOI] [PMC free article] [PubMed] [Google Scholar]
  • 3. 周 昊, 曾 栋, 边兆英, 等. 基于半监督网络的组织感知CT图像对比度的增强方法[J]. 南方医科大学学报, 2023, 43(6): 985-93. [DOI] [PMC free article] [PubMed] [Google Scholar]
  • 4. 丁家满, 刘 楠, 周蜀杰, 等. 基于正则化的半监督弱标签分类方法[J]. 计算机学报, 2022, 45(1): 69-81 [Google Scholar]
  • 5. 翟德明, 沈斯娴, 周 雄, 等. 基于最优传输理论的深度半监督学习伪标签生成算法[J]. 软件学报, 2024, 35(11): 5196-209. [Google Scholar]
  • 6. Li CC, Zhang JS, Niu DM, et al. Boundary-aware uncertainty suppression for semi-supervised medical image segmentation[J]. IEEE Trans Artif Intell, 2024, 5(8): 4074-86. doi: 10.1109/tai.2024.3359576 [DOI] [Google Scholar]
  • 7. 姚宗亮, 黄 荣, 董爱华, 等. 基于多模态融合和自适应剪枝Transformer的脑肿瘤图像分割算法[J]. 宁夏大学学报: 自然科学版, 2024, 45(1): 16-24. [Google Scholar]
  • 8. 徐晗晗, 张印辉, 何自芬, 等. 伪标签置信度调控结直肠癌病理图像半监督语义分割[J]. 光学精密工程, 2025, 33(4): 591-609. [Google Scholar]
  • 9. Chen XK, Yuan YH, Zeng G, et al. Semi-supervised semantic segmentation with cross pseudo supervision[C]//2021 IEEE/CVF Conference on Computer Vision and Pattern Recognition (CVPR). June 20-25, 2021. Nashville, TN, USA. IEEE, 2021: 2613-22. doi: 10.1109/cvpr46437.2021.00264 [DOI] [Google Scholar]
  • 10. Wu YC, Xu MF, Ge ZY, et al. Semi-supervised left atrium segmentation with mutual ConsistencyTraining[C]//Medical Image Computing and Computer Assisted Intervention-MICCAI 2021. Cham: Springer, 2021: 297-306. doi: 10.1007/978-3-030-87196-3_28 [DOI] [Google Scholar]
  • 11. Adiga V S, Dolz J, Lombaert H. Anatomically-aware uncertainty for semi-supervised image segmentation[J]. Med Image Anal, 2024, 91: 103011. doi: 10.1016/j.media.2023.103011 [DOI] [PubMed] [Google Scholar]
  • 12. Bernard O, Lalande A, Zotti C, et al. Deep learning techniques for automatic MRI cardiac multi-structures segmentation and diagnosis: is the problem solved?[J]. IEEE Trans Med Imaging, 2018, 37(11): 2514-25. doi: 10.1109/tmi.2018.2837502 [DOI] [PubMed] [Google Scholar]
  • 13. Bakas S, Akbari H, Sotiras A, et al. Advancing The Cancer Genome Atlas glioma MRI collections with expert segmentation labels and radiomic features[J]. Sci Data, 2017, 4: 170117. doi: 10.1038/sdata.2017.117 [DOI] [PMC free article] [PubMed] [Google Scholar]
  • 14. 权 笑, 戴鹏程, 辛 潮, 等. LTE网络高价值区域识别与分析方法研究[J]. 电信工程技术与标准化, 2018, 31(5): 18-21. [Google Scholar]
  • 15. Zhou ZW, Rahman Siddiquee MM, Tajbakhsh N, et al. UNet++: a nested U-Net architecture for medical image segmentation[C]//Deep Learning in Medical Image Analysis and Multimodal Learning for Clinical Decision Support. Cham: Springer, 2018: 3-11. doi: 10.1007/978-3-030-00889-5_1 [DOI] [PMC free article] [PubMed] [Google Scholar]
  • 16. Zhao CJ, Xiang S, Wang YQ, et al. Context-aware network fusing transformer and V-Net for semi-supervised segmentation of 3D left atrium[J]. Expert Syst Appl, 2023, 214: 119105. doi: 10.1016/j.eswa.2022.119105 [DOI] [Google Scholar]
  • 17. Topol EJ. High-performance medicine: the convergence of human and artificial intelligence[J]. Nat Med, 2019, 25(1): 44-56. doi: 10.1038/s41591-018-0300-7 [DOI] [PubMed] [Google Scholar]
  • 18. Tarvainen A, Valpola H. Mean teachers are better role models: Weight-averaged consistency targets improve semi-supervised deep learning results[C]//Neural Information Processing Systems. , 2017. [Google Scholar]
  • 19. Xu Z, Wang YX, Lu DH, et al. Ambiguity-selective consistency regularization for mean-teacher semi-supervised medical image segmentation[J]. Med Image Anal, 2023, 88: 102880. doi: 10.1016/j.media.2023.102880 [DOI] [PubMed] [Google Scholar]
  • 20. Zhang YC, Jiao RS, Liao QC, et al. Uncertainty-guided mutual consistency learning for semi-supervised medical image segmentation[J]. Artif Intell Med, 2023, 138: 102476. doi: 10.1016/j.artmed.2022.102476 [DOI] [PubMed] [Google Scholar]
  • 21. Wang YC, Xiao B, Bi XL, et al. MCF: mutual correction framework for semi-supervised medical image segmentation[C]//2023 IEEE/CVF Conference on Computer Vision and Pattern Recognition (CVPR). June 17-24, 2023, Vancouver, BC, Canada. IEEE, 2023: 15651-60. doi: 10.1109/cvpr52729.2023.01502 [DOI] [Google Scholar]
  • 22. Chen YY, Yang ZY, Shen CY, et al. Evidence-based uncertainty-aware semi-supervised medical image segmentation[J]. Comput Biol Med, 2024, 170: 108004. doi: 10.1016/j.compbiomed.2024.108004 [DOI] [PubMed] [Google Scholar]
  • 23. 郑孙易, 刘佳鑫, 崔效楠, 等. 人工智能在肿瘤影像学中的应用进展[J]. 放射学实践, 2025, 40(9): 1093-7. [Google Scholar]
  • 24. Menze BH, Jakab A, Bauer S, et al. The multimodal brain tumor image segmentation benchmark (BRATS)[J]. IEEE Trans Med Imaging, 2015, 34(10): 1993-2024. [DOI] [PMC free article] [PubMed] [Google Scholar]
  • 25. Bauer S, Wiest R, Nolte LP, et al. A survey of MRI-based medical image analysis for brain tumor studies[J]. Phys Med Biol, 2013, 58(13): R97-R129. doi: 10.1088/0031-9155/58/13/r97 [DOI] [PubMed] [Google Scholar]
  • 26. Salvador A, Bellver M, Campos V, et al. Recurrent neural networks for semantic instance segmentation[J]. arXiv preprint arXiv: 1712.00617, 2017. [Google Scholar]
  • 27. Taha AA, Hanbury A. Metrics for evaluating 3D medical image segmentation: analysis, selection, and tool[J]. BMC Med Imaging, 2015, 15: 29. doi: 10.1186/s12880-015-0068-x [DOI] [PMC free article] [PubMed] [Google Scholar]
  • 28. Petitjean C, Dacher JN. A review of segmentation methods in short axis cardiac MR images[J]. Med Image Anal, 2011, 15(2): 169-84. doi: 10.1016/j.media.2010.12.004 [DOI] [PubMed] [Google Scholar]
  • 29. Zhuang XH, Shen J. Multi-scale patch and multi-modality atlases for whole heart segmentation of MRI[J]. Med Image Anal, 2016, 31: 77-87. doi: 10.1016/j.media.2016.02.006 [DOI] [PubMed] [Google Scholar]
  • 30. Isensee F, Jaeger PF, Kohl SAA, et al. nnU-Net: a self-configuring method for deep learning-based biomedical image segmentation[J]. Nat Methods, 2021, 18(2): 203-11. doi: 10.1038/s41592-020-01008-z [DOI] [PubMed] [Google Scholar]
  • 31. Esteva A, Robicquet A, Ramsundar B, et al. A guide to deep learning in healthcare[J]. Nat Med, 2019, 25(1): 24-9. doi: 10.1038/s41591-018-0316-z [DOI] [PubMed] [Google Scholar]

Articles from Journal of Southern Medical University are provided here courtesy of Editorial Department of Journal of Southern Medical University

RESOURCES