中医舌苔诊断系统：YOLOv5+SAM+ResNet50全链路Web应用-北京尧图网络

简介一份完整的中医舌苔智能诊断网页应用源码包面向计算机、电子信息等专业课程设计、期末大作业与毕业设计场景也适合深度学习与Web开发初学者。项目以Python为后端、Vue为前端采用yolov5目标检测定位舌体、Segment Anything图像分割提取舌象区域、ResNet50残差网络执行舌色、舌苔色、薄厚、腻否四维分类最终自动生成健康报告并支持历史存储完整呈现多模型协同分析到Web展示的落地流程。压缩包共85个文件含22个Python源码、24个Vue组件、10个JavaScript脚本、7个JSON配置以及SQL脚本、CSS样式、图片素材和项目说明文档整体仅2.49MB后端application与前端frontend目录分离结构清晰便于分模块阅读与二次开发。目前已有282人学习浏览下载后配合说明可快速运行调试是参考真实项目架构、理解目标检测与分类模型集成的实用资料。1. 中医舌苔项目一个能把舌象图拆成四维诊断结果的Web应用如果你只是想找一个能跑的Python Web项目当课程设计或毕设那这个中医舌苔项目值得仔细看一遍。它不是那种“只有一个登录注册增删改查”的Demo而是把深度学习模型真正接进了Web后端用户上传一张舌象照片后端先用YOLOv5定位舌头区域再用Segment Anything做精细分割最后交给ResNet50去判断舌色、舌苔色、薄厚、腻否四个维度。是的三个模型串成一条完整的推理管线而不是单模型硬扛所有任务。前端是Vue3 Vite后端是Python的application目录结构整体前后端分离通过代理跨域联调。源码包里带了一个AppDatabase.db数据库文件这意味着你把它跑起来就能看到完整的舌象上传、诊断、报告生成与历史报告查询流程。适合计算机、数学、电子信息类专业拿来当期末大作业或毕设参考重点是你需要能看懂代码遇到问题自己会调而不是指望双击就出结果。2. 解剖后端目录application里到底藏了什么拿到源码包先别急着跑把目录结构捋清楚比什么都重要。整个后端的核心都放在application目录下它的分层方式接近企业级Flask应用的写法config放配置core放核心算法net放神经网络模块models和orm管数据库映射routes管路由。我第一次打开这个项目时第一反应是“这不是随便写着玩的课程作业”因为分目录的人明显有工程经验或者参考了开源社区的成熟套路。2.1 core和net分割与分类的模型拼接逻辑在中医舌象分析这个场景里直接拿原始图片做分类是不靠谱的。用户上传的舌象照片里往往包含嘴唇、面部皮肤甚至背景这些干扰信息会直接影响ResNet50的判读。所以项目把流程拆成了两段先做目标检测和分割再做分类。core目录下就是这些算法模块的组装逻辑net目录下是网络结构的定义。# application/core/inference.py import torch from application.net.yolov5 import YOLOv5Detector from application.net.sam import SamSegmenter from application.net.resnet50 import ResNet50Classifier class TongueInferencePipeline: def __init__(self, devicecuda if torch.cuda.is_available() else cpu): self.device device self.detector YOLOv5Detector(weightsweights/yolov5s.pt, devicedevice) self.segmenter SamSegmenter(weightsweights/sam_vit_b.pth, devicedevice) self.classifier ResNet50Classifier(weightsweights/resnet50_tongue.pth, devicedevice) def predict(self, image_path): # 第一步YOLOv5定位舌头区域 boxes self.detector.detect(image_path) if not boxes: return {error: 未检测到舌象请重新拍摄} # 第二步SAM在检测框内做精细分割 tongue_mask self.segmenter.segment(image_path, boxes[0]) # 第三步将分割后的舌象送入ResNet50分类 result self.classifier.classify(image_path, tongue_mask) return result这段代码的拼接逻辑非常清晰YOLOv5的detect返回检测框坐标SAM的segment拿检测框做分割掩码最后分类器只关注掩码区域内的舌象特征。参数层面有两点值得注意一是device会自动切换CPU和CUDA二是每个模型都有独立的weights路径。如果机器没有GPUtorch会自动退回CPU模式但推理速度会慢很多后面我会在避坑章节详细说。2.2 routes和orm前端请求如何落到模型推理路由层是整个后端对外的窗口。用户上传舌象图片后前端通过HTTP请求把图片传到后端路由层负责接收文件、调用推理管线、再把结果写入数据库。orm目录下是SQLAlchemy的模型定义routes和models相互配合完成“上传→诊断→返回报告→存储报告”的完整闭环。# application/routes/tongue.py import os from flask import Blueprint, request, jsonify from application.core.inference import TongueInferencePipeline from application.orm.models import HealthReport from application import db tongue_bp Blueprint(tongue, __name__) pipeline TongueInferencePipeline() tongue_bp.route(/api/tongue/diagnose, methods[POST]) def diagnose(): file request.files.get(image) if not file: return jsonify({code: 400, msg: 未收到图片}), 400 # 保存临时文件 tmp_path os.path.join(/tmp, file.filename) file.save(tmp_path) # 模型推理 result pipeline.predict(tmp_path) if error in result: return jsonify({code: 500, msg: result[error]}), 500 # 写入数据库 report HealthReport( user_idrequest.form.get(user_id), tongue_colorresult[tongue_color], coat_colorresult[coat_color], thicknessresult[thickness], greasinessresult[greasiness], suggestionresult[suggestion] ) db.session.add(report) db.session.commit() return jsonify({code: 200, data: result})注意这里的路由定义用了Blueprint这是Flask项目工程化的标准做法。HealthReport模型对应数据库里的health_report表字段包括舌色、苔色、薄厚、腻否、健康建议。前端拿到的JSON里不仅有四个维度的分类标签还有一份suggestion字段这个字段的内容来自core目录里预置的中医知识库后面我会讲到。2.3 config和run.py启动入口与参数配置的细节整个应用的入口是根目录下的run.py它负责创建Flask应用实例并加载所有Blueprint。config目录下通常会有数据库连接串、模型路径、上传文件大小限制等配置项。我第一次看这个项目的配置文件时发现数据库默认用的是SQLiteAppDatabase.db这大大降低了本地复现的门槛。pip install -r requirements.txt python run.pyrequirements.txt里锁定了Flask、torch、yolov5、segment-anything、opencv-python等核心依赖。启动后Flask默认跑在5000端口前端通过Vite的代理把/api前缀的请求转发到这个端口实现跨域联调。3. 前端工程Vue3 Vite如何把推理结果变成健康报告前端放在frontend目录下面技术栈是Vue3 Vite Vue Router。如果你做过现代前端项目这个结构会非常熟悉src/components放组件src/views放页面src/router放路由配置vite.config.js里配了打包代理和跨域。整个前端的作用不只是展示结果它要完成从上传图片到渲染健康报告的完整交互闭环。3.1 views中的核心页面逻辑前端主要页面包括舌象上传页和健康报告页。上传页做的事情是调用后端接口、等待模型推理、把结果渲染成可视化报告。注意这里有个细节报告生成后后端会把HealthReport记录写入数据库前端用user_id去查询历史报告列表。// frontend/src/views/DiagnoseView.vue export default { data() { return { imageFile: null, diagnosing: false, report: null } }, methods: { async uploadAndDiagnose() { const formData new FormData() formData.append(image, this.imageFile) formData.append(user_id, localStorage.getItem(user_id)) this.diagnosing true try { const response await fetch(/api/tongue/diagnose, { method: POST, body: formData }) const result await response.json() if (result.code 200) { this.report result.data } } finally { this.diagnosing false } } } }fetch请求直接打到/api/tongue/diagnose这个路径上没有写绝对地址这是因为Vite在开发模式下配置了代理本地开发时跨域问题被代理层解决掉了。上传前没有做图片格式校验这是在真实场景里应该补的一个点我这里只是按源码现有的能力说事。3.2 Vite代理与打包参数vite.config.js是前后端联调的桥梁。开发模式下Vite Dev Server跑在5173端口代理规则会把/api开头的请求转发到后端5000端口。这个配置写得对不对直接影响你本地调试验证能不能跑通。// frontend/vite.config.js import { defineConfig } from vite import vue from vitejs/plugin-vue export default defineConfig({ plugins: [vue()], server: { port: 5173, proxy: { /api: { target: http://localhost:5000, changeOrigin: true } } } })changeOrigin设为true是必须的否则后端收到的请求头里Host还是localhost:5173某些严格校验Host的服务器会拒绝请求。打包时用npm run build生成dist目录然后通过Nginx之类的静态服务器托管再把/api反向代理到后端地址这就是生产部署的标准姿势。3.3 测试链路cypress与vitest的用途源码包里还带了cypress和vitest配置这倒是有点出乎意料。vitest跑单元测试cypress做端到端测试。对课程设计来说测试不是硬性要求但存在这些配置起码说明作者有意识地把工程当产品做。如果你只是想复现功能可以暂时跳过测试但如果你想拿这份代码跟面试官讲解工程能力测试配置反而是切入点。4. 本地跑通完整链路从克隆到看到第一份舌象报告把源码包解压后我习惯先看一眼README和requirements.txt再动手。这个项目前后端分离意味着要同时启动两个进程。加上数据库文件已经存在理论上按顺序执行就能在十分钟内看到结果。但这里有几个细节如果处理不好就会卡住。4.1 后端依赖安装与Python版本选择先装后端依赖。要求里没写死Python版本但我建议3.8到3.10之间因为torch和segment-anything对Python版本有兼容性要求。如果你机器上同时装了多个Python版本记得用虚拟环境隔离。cd TongueDiagnosis python -m venv venv source venv/bin/activate # Windows下是 venv\Scripts\activate pip install -r requirements.txt装依赖时大概率会碰到torch下载慢的问题。常见做法是先用默认源装卡住就换国内镜像pip install torch torchvision --index-url https://download.pytorch.org/whl/cu118这个命令指定了CUDA 11.8版本的torch。如果你没有NVIDIA显卡或者不确定CUDA版本直接pip install torch torchvision装CPU版就行但推理速度会慢一张图可能要等到十秒左右。4.2 前端依赖安装与启动后端起来后另开一个终端进frontend目录装前端依赖。cd frontend npm install npm run devnpm install如果报错多半是node版本太老Vite 5.x要求Node 18。装完之后npm run dev会把开发服务器跑在5173端口浏览器访问localhost:5173就能看到舌象诊断页面。4.3 环境变量与路径修正源码包的config目录里如果有.env文件需要检查一下模型权重路径和数据库路径是否匹配你当前的目录。常见问题是模型权重目录不存在或路径写死导致后端一启动就报FileNotFoundError。mkdir -p weights # 把下载好的yolov5s.pt、sam_vit_b.pth、resnet50_tongue.pth放进来这三个模型文件是整个推理链路的命脉。yolov5s.pt可以从YOLOv5官方仓库下SAM权重从Meta官方下ResNet50的舌象分类权重项目里有没有附带需要看压缩包内weights目录实际情况。如果没带你就得自己训练或者在核心代码里找到它预训练权重的来源。这个项目既然是课程设计级别的大概率用的是torchvision预训练权重加微调真正跑通时可能需要在源码里找线索改路径。4.4 数据库初始化与迁移AppDatabase.db已经存在说明表和初始数据已经建好了。但如果你换了数据库文件或者想清空数据就需要手动执行建表逻辑。项目里没有看到migrations目录用的是SQLAlchemy的db.create_all()方式这在application/init.py里能找到。# application/__init__.py from flask import Flask from application.config import Config from application.orm import db def create_app(): app Flask(__name__) app.config.from_object(Config) db.init_app(app) with app.app_context(): db.create_all() return appcreate_app是Flask应用工厂的标准写法db.create_all只在表不存在时执行不会覆盖已有数据。如果你改过模型字段记得手动删掉AppDatabase.db让它重建否则新旧表结构不一致会报错。5. 避坑指南本地复现这条舌象链路最容易翻车的五个地方这个项目看起来结构清晰但真正在自己机器上跑的时候踩坑点一个接一个。我把我实际遇到的问题整理出来每条都按现象、原因、解决来写照方抓药能省很多时间。5.1 pip安装torch时进度条卡死现象运行pip install -r requirements.txt时在torch这一步卡住不动或者下了很久都不完成。原因torch的wheel包体积大官方源在国内访问速度慢甚至可能断连。解决先用国内镜像装基础包torch单独指定源。我的做法是分两步走pip install -r requirements.txt前先手动装torch和torchvision指定清华镜像。pip install torch torchvision -i https://pypi.tuna.tsinghua.edu.cn/simple装完之后再跑剩下的依赖成功率能提高不少。如果装了一半失败重新执行同一条命令pip有缓存不会重新下载。5.2 torch.cuda.is_available()返回False现象代码里明明写了自动切GPU但日志打印出来一直是CPU。原因装了CPU版torch或者显卡驱动版本和CUDA版本不匹配。解决先看自己显卡型号。如果是NVIDIA卡执行nvidia-smi看CUDA版本号然后装对应版本的torch。比如驱动支持CUDA 12.x就装cu121/cu124轮子。没有NVIDIA卡就直接用CPU版只是慢但不是不能跑。5.3 YOLOv5检测框定位不准导致SAM分割失败现象上传舌象图后返回“未检测到舌象请重新拍摄”或者分割结果里只有半个舌头。原因YOLOv5的权重对方形舌象图的检测效果较好但遇到光线暗、拍摄角度不对的图片就会漏检。解决这个问题的根源在数据而不在代码。项目用的模型是在特定训练集上训练出来的对模糊图片的泛化能力有限。我的建议是换一张光线均匀、舌头完全露出的正面图重新上传。如果反复失败就得考虑自己在YOLOv5的基础上做扩充数据集的微调。对课程设计来说处理漏检的合理姿势是在前端提示用户重新拍摄代码逻辑走到这条路时不会崩只是返回JSON错误提示。5.4 前端npm run dev报错显示Node版本不兼容现象运行npm run dev时报Error: The engine node is incompatible with this module。原因Vite对Node版本有硬性要求通常要求18以上。解决用nvm切换Node版本。nvm install 18 nvm use 18切完后重新执行npm install大概率能过。如果你机器上的Node特别老比如16.x我只能劝你先升级再折腾否则后面还会遇到一堆依赖版本冲突。5.5 Flask后端返回JSON被识别成文件下载现象前端fetch请求能收到响应但浏览器地址栏直接访问接口时变成了文件下载。原因Flask的jsonify在部分老旧版本里返回的Content-Type是application/json但浏览器对新格式的识别有兼容问题通常与代理层有关。解决这个问题多见于开发模式配了代理却漏了changeOrigin参数的情况。前端请求发送出去后Vite代理和后端之间的Host不一致Flask的严格模式会把请求当作跨域直接拒绝。把vite.config.js里changeOrigin: true加上然后重启npm run dev。那之后我再也没遇到过这种奇怪的响应问题。如果你有别的奇怪的报错建议先把开发模式下的控制台日志全部截图看一遍很多问题都是配置层面而不是代码层面的。6. 把健康报告用起来从单次诊断到报告持久化源码的功能边界是单次诊断加报告存储但如果你要做成真正能用的系统报告这块还有很多可扩展的空间。我梳理一下这块的思路分享几个可以优化的地方。6.1 持久化存储与历史报告查询虽然AppDatabase.db已经建好了health_report表但前端有没有提供历史报告列表页面需要看src/views下的实际代码情况。在我的使用习惯里一份健康报告如果不能被回看它的价值就打折了。我一般会把报告同时存成JSON文件和数据库记录前端加一个报告列表页。6.2 前端历史报告的面板设计src-components目录下应该有HealthReportCard之类的组件。如果源码里没有我就简单补一个展示舌色、苔色、薄厚、腻否四个标签配一张图片缩略图再放上健康建议文字。这样用户每次诊断都能留下一份可追查的记录能看到自己的舌象变化趋势这个能力比单次诊断更有价值。你可以按这个思路在自己的课程设计文档里写上“多周期舌象趋势分析”这才是项目差异化的地方。6.3 模型替换的扩展点如果你对Segment Anything不熟或者想用别的分割模型替代它net目录下的类定义写得很清晰继承关系好梳理。换模型时只需要保持输入输出接口一致推理管线里的调用代码不用改。这就是前后端分离加模块化建模的好处模型逻辑、业务逻辑、展示逻辑之间没有代码层面上的硬耦合。从那以后我每拿到一个带深度模型的项目都强制自己先走一遍“目录结构梳理→依赖确认→后端启动→前端启动→完整链路验证”的流程。这个习惯帮我提前排掉了大部分环境类问题也让我对项目本身的边界有了更清楚的感知。如果你也准备拿这个中医舌苔项目做课程设计或者学习参考希望这条路径能帮你少走弯路祝顺利。项目打包在压缩包里源码结构和文档都在值得你花时间拆一遍。本文还有配套的精品资源点击获取

中医舌苔诊断系统：YOLOv5+SAM+ResNet50全链路Web应用

相关推荐

基于BP神经网络的人脸识别Matlab实现：PCA降维与GA优化实战

SpringBoot智慧养老平台实战：从需求拆解到部署上线全流程

Tinycast vs Raycast 横评：兼容 114/147 个命令之外，差距还剩什么？

更多资讯

统一配置抽象层cua：解决微服务配置优先级与热加载难题

知识图谱推荐引擎毕业设计：从Neo4j构建到TransE路径推理全流程

easyread还能卷多久？阅读工具如何构建长期护城河

基于SpringBoot的高校课程智能选课系统-附源码

2026亲测有效：6款降AI工具盘点，教你如何彻底降低AIGC机器痕迹

2024-2026.5 ClaudeCode 时间线：从 Agent 到 MCP、Skills 的 SDK 演进路线图

今日更新

再见，SSE！你好，Streamable HTTP！轻松开发 Streamable HTTP MCP Server 并接入 TaoToken

工业软件标准化路线图：国产替代的落地施工图

VCMI安卓版实操指南：原生运行英雄无敌3的3步技术落地

本周精选

CMOS设计三大物理效应：体效应、沟道长度调制与亚阈值导电

微信小程序在线阅读毕设全解析：Java后端+MySQL+避坑实战

Android音频问题五层分析法：从App到Codec的系统化诊断

本月热门

我发现了一个新思路：用 Remotion + Claude Code 像写代码一样自动化生成短视频

Windows下 Codex 中 Chrome 和 Computer Use 插件不可用问题排查及解决参考方式：TaoToken 统一 Key 配置与验证

2026 大模型集体涨价：用 Python 做企业 Token 成本测算与选型避坑（附配置）

读完文章，想聊聊您的网站？