来源:期刊VIP网 时间:
作者:刘迈;王晶;王曼睿;樊林淼;周恒宇;张晓晴;
单位:北京中医药大学生命科学学院;
摘要:目的 旨在探索分割一切模型(Segment Anything Model, SAM)系列图像分割大模型在数字化中医望诊研究中的应用,有望减少在中医理论指导下为训练舌、面、目、手等图像的特定部位分割模型过程中所需的大量人工标注工作。方法 首先采用快速分割一切模型(Fast Segment Anything Model, FastSAM)完成无监督分割舌、面、目等图像,评估其分割完整的舌部、面部和目部的效果,表明FastSAM能够高效分离中医望诊所需的特定部位。其次采用SAM在框选提示下可弥补FastSAM对舌部的裂纹、面部的额头、眼部的眼络、手部的指甲等细节部分分割结果不理想的缺点。结果 FastSAM在舌部和面部的交并比(Intersection over Union, IOU)值均超过0.9,目部超过0.8,表明在整体或部分图像分割方面表现良好,并且SAM能针对FastSAM无法处理的细节部位展现出良好的分割效果。结论 SAM系列模型为后续中医理论指导下实现中医望诊图像特征分析提供一种新的分割方法,实现零样本分割各类中医望诊维度图像,从而有望大量减少中医望诊图像特征的人工标注工作量,同时有效提升中医望诊的准确性和可靠性。
关键词:图像分割;;舌诊;;面诊;;目诊;;甲诊;;四诊客观化
基金资助:国家重点研发计划项目(2022YFC3502301)