(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211131323.5 (22)申请日 2022.09.16 (71)申请人 五邑大学 地址 529000 广东省江门市蓬江区东成村 22号 (72)发明人 冯跃　吴欣　徐红　林卓胜　 梁淑芬　李胜可　朱嘉健　刘启超　 马圆港　 (74)专利代理 机构 广州嘉权专利商标事务所有 限公司 4 4205 专利代理师 简伟健 (51)Int.Cl. G06T 7/11(2017.01) G06T 7/00(2017.01) G06V 10/26(2022.01)G06V 10/44(2022.01) G06V 10/764(2022.01) G06V 10/82(2022.01) A61B 5/00(2006.01) (54)发明名称 一种舌诊方法、 设备和介质 (57)摘要 本申请实施例提供了舌诊方法、 设备和介 质， 包括获取舌头图像； 通过基于Unet结构的图 像分割网络对舌头图像进行图像分割， 得到分割 出五脏表体区域的分割图像， 其中在图像分割过 程中通过最大池化层的可微池化函数对舌头图 像 进 行 最 大 池 化 ， 并 结 合 注 意 力 模 块 、 Transformer模块和边缘特征提取模块； 通过由 元学习器学习得到的分类网络对分割图像进行 分类得到分类结果； 根据分类结果得到身体状态 信息； 能够提高舌诊的判断准确性。 权利要求书2页 说明书8页 附图2页 CN 115496770 A 2022.12.20 CN 115496770 A 1.一种舌诊方法， 其特 征在于， 包括： 获取舌头图像； 通过基于Unet结构的图像分割网络对舌头图像进行图像分割， 得到分割出五脏表体区 域的分割图像， 其中在图像分割过程中通过最大池化层的可微池化函数对 所述舌头图像进 行最大池化； 通过分类网络对所述分割图像进行分类得到分类结果， 所述分类结果用于表征舌头对 应的五脏状态， 其中所述分类网络由元 学习器学习得到； 根据所述分类结果得到身体 状态信息 。 2.根据权利要求1所述的一种舌诊方法， 其特 征在于， 所述获取舌头图像， 包括： 获取舌头 视频数据； 根据所述 舌头视频数据分割得到所述 舌头图像。 3.根据权利要求1所述的一种舌诊方法， 其特征在于， 所述图像分割网络包括级联的多 个编码器； 在图像分割 过程中， 通过所述编码器的边缘特征提取模块从所述舌头图像提取 边缘特征信息， 所述 边缘特征信息用于监控和指导 舌头图像的图像分割。 4.根据权利要求3所述的一种舌诊方法， 其特征在于， 所述图像分割网络还包括级联的 多个解码器， 所述编 码器与所述解码 器一一对应地跳跃连接； 在图像分割过程中， 通过信息 过滤模块过滤所述编 码器的层输出信息得到第一特征信息， 并将所述第一特征信息传递给 对应的所述 解码器， 所述第一特 征信息用于提高所述图像分割网络的分割效果。 5.根据权利要求4所述的一种舌诊方法， 其特征在于， 所述解码器设有注意力模块； 在 图像分割过程中， 通过所述注意力模块得到注意力特征， 所述注意力特征用于增强所述分 割图像的特 征表达。 6.根据权利要求5所述的一种舌诊方法， 其特征在于， 所述通过基于Unet结构的图像分 割网络对舌头图像进行图像分割， 得到分割出五脏表体区域的分割图像， 包括： 根据所述第一特 征信息和所述注意力特 征， 得到所述分割图像。 7.根据权利要求1所述的一种舌诊方法， 其特征在于， 所述分类网络是按照以下方法学 习得到： 获取训练舌头图像， 将所述训练舌头图像分为支持集和查询集； 根据预设图像任务， 通过 所述元学习器计算所述支持集的平均特 征； 对所述查询集进行编码； 根据所述平均特 征， 计算编码后的所述 查询集和所述支持集之间的距离， 得到距离值； 根据所述距离值进行分类， 以训练所述分类网络 。 8.根据权利要求7所述的一种舌诊方法， 其特征在于， 所述训练舌头图像包括标注图 像； 所述标注图像按照以下 方法得到： 获取原始舌头图像； 将所述原 始舌头图像划分出多个区域， 对所述区域进行 标注， 所述区域与五脏对应； 对所述区域的舌质与舌 苔颜色进行 标注， 得到所述标注图像。 9.一种电子设备， 包括： 存储器、 处理器及存储在存储器上并可在处理器上运行的计算 机程序， 其特征在于， 所述处理器执行所述计算机程序时实现如权利要求1至8中任一项所 述的舌诊方法。权　利　要　求　书 1/2 页 2 CN 115496770 A 210.一种计算机可读存储介质， 其特征在于， 存储有计算机可执行指令， 所述计算机可 执行指令用于执 行如权利要求1至8中任一项所述的舌诊方法。权　利　要　求　书 2/2 页 3 CN 115496770 A 3