迪文科技论坛

 找回密码
 立即注册
搜索
查看: 62|回复: 0

【分享】23级 易泽锋,唐交文 老年人安全信息交互系统

[复制链接]

1

主题

0

回帖

24

积分

新手上路

Rank: 1

积分
24
发表于 7 天前 | 显示全部楼层 |阅读模式
基于T5L与DGUS的老年人安全信息交互系统

一、作品介绍

本作品以迪文T5L智能屏为控制与交互中心,基于DGUS开发环境,结合K210视觉检测、ASRPRO离线语音和迪文云,构建面向老年人的安全信息交互系统。系统提供触屏呼救、语音呼救、持续闭眼询问、联系人管理、事件记录、定时提醒和手机状态查看等功能,让用户通过屏幕或语音完成操作,并在同一界面中查看设备状态与处理结果。

二、工作原理

1. 触屏呼救与解除:用户点击呼救按钮后,DGUS触控组件将键值写入VP变量区,T5L读取并通过串口发送呼救命令。ASRPRO收到命令后控制报警输出,并经K210向T5L回传状态,屏端更新报警页面和事件记录。解除报警时,通过相应命令关闭报警输出并更新页面。

2. 离线语音交互:ASRPRO识别预设的呼救、解除和“我没事”等命令词,将识别结果接入对应业务。语音呼救控制报警并上报事件;“我没事”用于回应当前帮助询问,屏端核对会话编号后结束询问并返回原页面。T5L与ASRPRO共用本轮询问编号,使提问与回答相互对应。

3. 人脸与眼部检测:K210先运行人脸检测模型取得人脸区域,再将裁剪、缩放后的图像送入68点关键点模型,从两眼各取6个点计算眼睛纵横比EAR。程序结合人脸数量、尺寸和关键点几何关系筛选检测结果,将眼部坐标转换为睁眼、闭眼及检测状态。

4. 持续闭眼询问:双眼EAR满足闭眼条件时开始计时,连续有效闭眼达到3秒后发出帮助询问请求。T5L根据当前页面和业务状态进入询问页,ASRPRO播放提示并准备回答词表。用户可点击或说出“我没事”结束询问,也可选择呼救进入报警流程。连续计时与触发锁分别用于筛选短暂眨眼和控制重复询问,输入、编辑等页面通过页面条件管理交互。

5. 温湿度显示:T5L定时按照DHT11数字通信时序读取环境温湿度,读取成功后更新对应VP变量,DGUS显示组件读取数值并刷新页面。

6. 亮度、音量与时间设置:亮度控件改变VP数值,程序将其应用到屏幕背光;音量滑条选择1至7档,T5L将档位编码为A1至A7发送给ASRPRO,语音模块解码后设置播放音量。日期时间使用草稿编辑与确认应用流程,由软件时钟提供记录和提醒所需时间。

7. 联系人与事件记录:联系人页面通过键盘录入姓名和电话,确认后保存。事件记录登记呼救、解除及帮助询问等操作,提取屏端时分并按新到旧显示。记录采用循环存储,支持翻页和清空;清空后根据有效条数切换至空记录页面。

8. 定时提醒与外设联动:用户输入备忘内容并设置日期时间,程序到时将事项标记为待提醒,发送固定语音提示请求,并在符合页面条件时显示提醒内容。RGB灯、蜂鸣器、舵机和继电器根据提醒或报警状态联动。蜂鸣器旋律以音符频率表保存在程序中,由定时器产生对应频率的信号。

9. 数据保存与恢复:程序将联系人、呼救与解除等事件记录、亮度和音量整理为存档,通过A、B两个存储区交替写入。开机时检查存档标识、版本、CRC和序号,选择有效且较新的数据恢复到运行状态。

10. 迪文云状态查看:T5L根据K210和ASRPRO的周期上报管理设备状态,再将检测、语音和报警输出状态分别写入0x6A02、0x6A03和0x6A04。联网模块按照产品字段与VP地址的映射读取数据,手机端显示模块运行、响应、超时及报警输出状态。扫码绑定与屏端确认完成手机账号和设备的关联。

三、设计思路

1. 硬件部分:以T5L智能屏为核心,连接K210视觉模块、ASRPRO语音模块、DHT11温湿度传感器,以及RGB指示灯、蜂鸣器、舵机和继电器等外设。K210采集并处理摄像头图像,ASRPRO识别语音指令、播放提示语并控制报警输出,T5L管理页面、数据和外设联动。模块间通过串口交换命令和状态,联网模块将设备状态接入迪文云。

2. 软件部分:分为一次开发与二次开发。一次开发使用DGUS配置背景、触控、文本显示、键盘、滑动和旋转调节等组件,通过VP变量地址连接界面与程序。二次开发使用Keil C51编写T5L业务程序,使用Python组织K210模型推理和眼部状态判断,使用天问开发ASRPRO语音交互。程序采用定时轮询与状态管理,协调触控、语音、视觉、提醒和数据保存,使输入、执行结果和页面显示保持对应。

演示视频:

【基于迪文t5l的老年人安全信息交互系统】 https://www.bilibili.com/video/B ... 31d5be27b3e2d271d9a

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

x
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

QQ|Archiver|手机版|小黑屋|迪文科技论坛 ( 京ICP备05033781号-1 )

GMT+8, 2026-11-20 12:07 , Processed in 0.045346 second(s), 23 queries .

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表