《2025 DigiKey AI应用创意挑战赛》手语版小智 — AI手语实时翻译与交互系统
### 一、项目名称《2025 DigiKey AI 应用创意挑战赛》手语版小智 — AI 手语实时翻译与交互系统
### 二、项目概述
“手语版小智” 是一款基于树莓派 5 硬件运行的 AI 手语实时翻译系统，核心实现 A-Z 美式手语字母的实时识别与单词拼接。系统通过树莓派摄像头采集手部动作，借助 MediaPipe 提取手部关键点并完成归一化、缩放等预处理，再通过优化后的 ONNX 格式 LSTM 模型进行推理，当识别结果的置信度超过阈值且稳定帧数达标时，自动将字母拼接为单词并实时展示，解决手语与文字沟通的基础障碍，具备轻量化、实时性、低成本的特点，适配树莓派 5 的硬件性能进行了多线程、推理优化等定制化调整。
### 三、作品实物图
实物核心组成包含：
!(https://www.eefocus.com/forum/data/attachment/forum/202601/27/232943b5zi5r85rm8fjkij.png)
!(https://www.eefocus.com/forum/data/attachment/forum/202601/27/232950ad9nupwwudqnd8ia.png)
!(https://www.eefocus.com/forum/data/attachment/forum/202601/27/232954hxud9stknzyalls9.png)
!(https://www.eefocus.com/forum/data/attachment/forum/202601/27/232959eh7omoi7vnziidjc.png)
!(https://www.eefocus.com/forum/data/attachment/forum/202601/27/233004k8k4zxa8ka8rn3nr.png)
### 四、演示视频
视频主要展示系统完整运行流程：
1. 硬件启动：展示树莓派 5 通电、摄像头与显示屏连接就绪的状态，终端打印 “ONNX 模型加载成功” 等启动日志；
2. 实时识别演示：操作人员在摄像头前依次做出 A-Z 不同手语字母动作，显示屏实时绘制手部关键点连线、显示识别置信度，当稳定识别达标后，字母自动拼接至 “WORD” 栏形成单词；
3. 交互验证：展示无手部动作时系统重置状态、按 ESC 键退出程序的完整流程，同时呈现界面 FPS 数值（体现树莓派 5 上的实时运行性能）；
4. 效果总结：快速展示多个字母连续识别、拼接成简单单词（如 “HELLO”）的效果，验证系统的准确性和实时性。
!(https://www.eefocus.com/forum/data/attachment/forum/202601/27/232811ottg3co3yc3vhwcf.png)
通过网盘分享的文件：《2025 DigiKey AI应用创意挑战赛》手语版 “小智”——AI 赋能的手语智能
链接: https://pan.baidu.com/s/1YazP7tv46R3iKoUkOHBLMA?pwd=jcb8 提取码: jcb8
--来自百度网盘超级会员v6的分享
页:
[1]