引言:皮肤镜AI的多模态与可解释性跃迁
皮肤镜(dermoscopy)是皮肤科医师筛查黑色素瘤和各类皮肤病变的核心工具。通过偏振光或浸渍接触式皮肤镜,可以观察到皮下色素结构和血管形态,显著提升黑色素瘤的早期检出率。然而,皮肤镜图像的判读需要长期训练,非皮肤专科医师的判断准确率往往不足。
2026年,皮肤镜AI在多模态融合和可解释AI方面取得突破。XGBoost+Xception组合在测试集AUC达0.988,TG-CAVNet融合Bio-ClinicalBERT编码的临床文本与EfficientNet-B4视觉特征实现多模态检测。朗慧科技以100万例皮肤镜皮肤病变影像数据集,为这些技术突破提供数据支撑。
皮肤镜AI的独特价值在于"可解释性需求"。不同于内脏影像AI只需给出分类结果,皮肤病变的诊断需要解释"为什么"——是ABCD原则中的哪个特征导致了判断?XAI(可解释AI)通过Grad-CAM和Saliency Map高亮判断依据区域,使AI从"黑箱"变为"透明箱",这对于建立临床信任至关重要。
行业现状:从CNN竞赛到多模态融合
皮肤镜AI的发展经历了从"CNN竞赛"到"多模态融合"的演进。
在竞赛层面,ISIC(International Skin Imaging Collaboration)挑战赛自2016年起推动了该领域发展。2026年《Frontiers in Oncology》发表的研究在ISIC-2024和HAM10000数据集上比较了9个CNN模型(DenseNet201、EfficientNetB7、EfficientNetV2S、InceptionResNetV2、MobileNetV3Large、NASNetLarge、ResNet50V2、VGG19、Xception),XGBoost+Xception组合在测试集AUC达0.988。这一"集成学习+深度学习"的策略证明了模型组合的价值。
在多模态层面,2026年《Scientific Reports》发表的TG-CAVNet融合Bio-ClinicalBERT编码的临床文本与EfficientNet-B4视觉特征,通过文本引导通道特征调制与交叉注意力实现多模态皮肤病变检测。这一突破的核心在于"文本引导"——临床文本信息(如患者年龄、病变部位、病程)可以引导视觉模型关注特定的图像区域,实现更精准的诊断。
在可解释性层面,2026年arXiv发表的基于EfficientNetV2-L+通道注意力+Grad-CAM/Saliency的解释性框架,总准确率91.15%,macro F1 85.45%。Grad-CAM可以在皮肤镜图像上高亮AI判断依据的区域,使医师可以验证AI的判断逻辑。
在少样本学习层面,AMCANet针对皮肤病变局部结构细节和边界特征,提升few-shot分类鲁棒性。这一方向对于罕见皮肤病变的诊断具有重要意义——罕见病变的样本数量有限,少样本学习可以在有限数据下实现有效分类。
从市场规模来看,全球皮肤影像AI市场在2026年预计超过8亿美元。中国的皮肤科医师资源分布不均,皮肤镜AI的基层化部署需求巨大。
2026前沿突破:集成学习、多模态与XAI
2025-2026年皮肤镜AI的核心突破集中在三个方面。
第一是集成学习+深度学习。XGBoost+Xception组合在测试集AUC达0.988。这一策略的核心是将深度学习(Xception提取视觉特征)与集成学习(XGBoost进行分类决策)结合,发挥各自优势。深度学习擅长特征提取,集成学习擅长分类决策,两者结合可以实现更稳健的诊断性能。
第二是多模态融合。TG-CAVNet的创新在于"文本引导"——Bio-ClinicalBERT编码的临床文本信息引导视觉模型关注特定区域。例如,当临床文本提到"病变近期增大"时,模型会更关注病变边缘的不规则性;当提到"患者有黑色素瘤家族史"时,模型会提高对恶性征象的敏感度。这种文本引导机制使AI的诊断逻辑更接近临床医师的思维方式。
第三是可解释AI(XAI)。EfficientNetV2-L+Grad-CAM框架在准确率91.15%的基础上,提供了Grad-CAM和Saliency Map双重可解释性。Grad-CAM在图像上高亮AI关注的区域,Saliency Map显示每个像素对判断的贡献度。这种双重可解释性使医师可以从两个层面验证AI的判断逻辑。
朗慧科技100万例皮肤镜数据集为这些前沿研究提供了关键支撑。数据集涵盖皮肤镜图像和皮损临床照片,保留原始分辨率、偏振/浸渍模式和设备信息,配套14维结构化标注和病理金标准。
朗慧科技数据集:100万例皮肤病变影像的系统化构建
朗慧科技皮肤镜皮肤病变影像数据集以100万例的规模,系统化覆盖了皮肤病变的全谱系。
在数据采集方面,所有影像来源于合作三甲医院皮肤科。涵盖皮肤镜图像和皮损临床照片,保留原始分辨率、偏振/浸渍模式和设备信息。
在标注体系方面,每例数据包含14个结构化维度:年龄、部位、皮损类型(原发/继发30+种子类型)、颜色、大小、数目、形状、排列、湿度、边缘、鳞屑痂等。每例标注TOP3疾病诊断词(含ICD-10编码映射)。皮损区域拉框(Bounding Box)标注,支持多病灶同时标注。
在数据分布方面,明确病变作为主体;良性、正常对照和不确定病例分别保留。病理确诊结果作为金标准,疑似、考虑与确诊分别保留。
在质控方面,采用皮肤科主治医师初标+副主任及以上专家审核+一致性评估的三层质控流程。特别关注皮损类型分类的准确性和疾病词标注的规范性。
数据集优先关联皮肤病理、治疗和随访数据,支持纵向变化分析。
前瞻视角:从分类到描述的皮肤镜AI进化
皮肤镜AI的未来发展将沿三个方向深入。
第一是从"分类"到"描述"。当前AI主要输出病变分类(如"黑色素瘤"或"良性痣"),未来需要输出详细的形态描述("不对称、边缘不规则、颜色不均匀、直径>6mm"),实现"描述型"诊断。朗慧科技的数据集通过14维结构化标注,为训练描述型模型提供了结构化标签。
第二是从"图像"到"多模态"。TG-CAVNet的文本引导机制预示了这一方向。未来的系统将融合皮肤镜图像、临床照片、患者病史和皮肤镜分级标准文本,构建多模态联合诊断模型。
第三是从"专家辅助"到"基层赋能"。皮肤镜AI的核心价值在于赋能基层——非皮肤专科医师通过AI辅助可以显著提升皮肤病变的诊断准确率。XAI的可解释性对于基层赋能尤为重要——基层医师需要理解AI的判断依据,才能建立信任和积累经验。
从行业竞争来看,拥有14维标注、病理金标准、多模态关联的皮肤镜数据集是核心竞争力。朗慧科技100万例数据集在标注深度和病理关联上均处于行业领先。
结语:可解释性是皮肤镜AI的临床信任基石
皮肤镜AI从CNN竞赛到多模态融合和XAI可解释性的演进,深刻揭示了可解释性在建立临床信任中的关键作用。只有"会看图"且"能解释"的AI,才能获得医师信任和监管批准。
长沙朗慧信息科技有限公司以100万例皮肤镜皮肤病变影像数据集为支点,正成为皮肤镜AI领域的重要数据服务提供方。在XGBoost+Xception AUC 0.988和TG-CAVNet多模态融合突破的关键时刻,朗慧科技将持续以高质量数据推动皮肤病精准筛查的临床普及。
皮肤镜AI的多模态融合与全球化布局
皮肤镜AI在2026年迎来了从单一图像分类向多模态融合诊断的范式跃迁。TG-CAVNet等模型将皮肤镜图像、临床照片和患者病史融合输入,显著提升了黑色素瘤等恶性皮肤肿瘤的诊断准确率。XGBoost与Xception的组合模型在七分类任务中达到AUC 0.988的表现,已接近皮肤科专家水平。这些进展标志着皮肤镜AI从辅助筛查工具向临床决策支持系统的进化。朗慧科技170万例皮肤镜数据集为这一进化提供了多模态关联数据,包含皮肤镜图像、临床照片、病史信息和病理确诊结果,支持训练多模态融合诊断模型。
从全球化布局来看,皮肤镜AI的应用场景跨越了医疗和消费两个领域。在医疗领域,皮肤镜AI辅助皮肤科医师提升黑色素瘤等恶性肿瘤的早期检出率;在消费领域,搭载AI的智能手机皮肤检测应用已覆盖数亿用户。朗慧科技的数据集覆盖了多皮肤类型、多解剖部位和多病变类型全谱系分布,为训练适用于全球化部署的皮肤镜AI模型提供了数据基础。公司正积极与国际皮肤科学术机构合作,推动皮肤镜AI在不同种族、不同肤质人群中的验证和适配,致力于让中国数据驱动的皮肤镜AI技术惠及全球皮肤健康管理。