AI落地好场景，用米尔RK3576做无人视力测试仪

随着人工智能技术的快速发展，视觉检测技术在医疗健康领域的应用越来越广泛。传统的视力检测需要专业医护人员操作，检测效率较低，且难以实现自动化。本项目基于米尔RK3576开发板，设计并实现了一套智能视力检测系统，旨在提供一种便捷、高效的视力检测方案。RK3576是一款高性能ARM架构的开发板，搭载瑞芯微处理器，具备强大的AI推理能力，适合运行手势识别、图像处理等AI任务。

一、项目背景与目标

• 实现自动视力检测：用户通过简单的手势即可完成左右眼的视力检测

• AI手势识别：利用MediaPipe实现精准的OK手势检测，作为启动测试的交互方式

• 智能化流程控制：自动识别E字方向、判断测试结果、自动切换测试眼别

• 语音交互：集成语音播报功能，提供清晰的测试指引和结果反馈

二、系统功能设计

2.1 功能架构

系统架构图说明：

架构说明：

• RK3576开发板: 核心控制器，运行所有业务逻辑

• 视频播放模块: 使用GStreamer进行硬件解码播放引导视频

• 手势识别模块: MediaPipe Hands检测OK手势作为启动信号

• 距离检测模块: 串口读取TOF传感器数据，检测用户距离

• 语音播报模块: ES8388音频编解码，播报欢迎词和检测结果

• UI显示模块: PySide6 Qt开发，HDMI输出到显示屏

数据流向：

• 摄像头采集图像 → MediaPipe手势识别 → 判断OK手势

• TOF传感器检测距离 → 串口通信 → 判断距离是否合适

• 随机生成E字方向 → 显示在屏幕上

• 用户手势 → 摄像头采集 → 手势识别 → 对比判断

• 测试结果 → 语音播报 + 屏幕显示

2.2 核心功能模块

模块

功能描述

视频播放模块

开机播放引导视频，支持GStreamer硬件解码

手势识别模块

使用MediaPipe检测OK手势，作为测试启动信号...