迪文科技论坛

 找回密码
 立即注册
搜索
查看: 4|回复: 0

【分享】老人安全监护边缘终端

[复制链接]

1

主题

0

回帖

24

积分

新手上路

Rank: 1

积分
24
发表于 半小时前 | 显示全部楼层 |阅读模式
一、作品功能简介
本作品设计并实现了一套基于迪文屏的老人安全监护边缘终端,以迪文串口屏为本地交互与显示核心,结合MaixCam视觉识别设备、天问语音播报模块及DeepSeek云端大模型,实现跌倒检测、情绪识别、文字聊天陪伴和本地信息提醒,覆盖“安全监测+情感陪伴”两类居家养老需求。
系统通过MaixCam摄像头采集现场画面,在设备端本地运行YOLO跌倒检测程序和情绪识别程序,输出跌倒相关识别结果及情绪状态,并将结果送至迪文屏进行页面展示与交互;天问语音模块承担提醒信息播报,在出现异常提示时向老人发出语音提示。老人可通过迪文屏输入文字,经联网调用DeepSeek大模型获得文字回复,完成日常聊天陪伴。迪文云开发者平台用于设备注册与页面配置,终端界面设置首页、安全监测、语音聊天、告警记录等功能页面。
系统将本地视觉推理、屏幕交互、语音播报与云端文字问答相结合,形成“画面采集—本地识别—界面显示—语音提醒—云端对话”的功能链路,为居家老人的日常安全监护与情感陪伴提供辅助支持。
二、工作原理
系统采用“本地视觉终端+屏幕交互终端+云端服务”的协同架构,主要工作过程分为以下四个环节。
(1)画面采集与本地识别
MaixCam摄像头获取现场画面后,设备端运行YOLO跌倒检测程序与情绪识别程序,对画面进行本地推理,输出跌倒相关识别结果和情绪状态,形成设备端可运行的识别链路。
(2)识别结果传递与界面显示
识别结果进入终端交互与提醒链路,迪文屏根据结果进行状态展示与页面切换,将跌倒相关提示、情绪状态及设备信息呈现在对应页面中,供老人查看和操作。
(3)语音播报与文字聊天
出现异常提示时,天问模块承担提醒信息播报,向老人发出语音提示;老人也可通过迪文屏输入文字,经联网调用DeepSeek生成回答,返回文字内容并在终端显示,完成文字对话。
(4)云端调用与功能边界控制
本地识别不依赖DeepSeek,云端仅用于文字聊天,不用于跌倒和情绪模型推理;当前聊天以文字输入和文字回复为主,不支持语音聊天,天问模块的播报与“语音聊天”不是一回事。
三、设计思路
整体设计围绕居家老人安全与情感陪伴场景,采用模块化分工,将视觉识别、界面交互、语音播报和云端问答进行组合,并通过识别结果与界面提示关联实现协同。
硬件分工
MaixCam负责摄像头画面采集、YOLO跌倒检测、本地情绪识别及设备端业务协同;迪文屏负责状态展示、页面交互和文字显示;天问模块负责提醒信息播报;DeepSeek云端大模型按需提供文字问答。实体终端由迪文屏、MaixCam与天问语音模块集成而成。
软件分层
设备端识别程序负责画面采集与本地推理;终端交互部分负责页面显示、状态更新和文字输入;播报部分负责提醒信息输出;云端调用部分负责文字问答请求与回复显示。各部分按“采集—识别—显示—播报/对话”的关系衔接,便于分别调试和维护。
本地与云端协同
跌倒检测和情绪识别在MaixCam本地运行,视觉推理相对独立;DeepSeek文字聊天需要联网,仅用于聊天功能调用;天问模块承担提醒播报,不承担语音聊天。通过这种分工,识别在本地完成,聊天按需联网。
适老化与多方式交互
迪文屏承担状态展示与页面交互,围绕居家监护场景设置首页、安全监测、语音聊天、告警记录等功能页面;天问模块以语音播报补充屏幕提示,使老人在未注视屏幕时也能获知提醒信息;文字聊天为老人提供日常交流入口。
实物集成与功能边界
实体终端由迪文屏、MaixCam和天问语音模块集成而成,形成可运行、可演示的设备。系统区分不同功能的实现方式:跌倒与情绪识别在本地运行,文字聊天需要联网;当前聊天以文字输入和文字回复为主,不支持语音聊天;播报模块仅承担提醒信息播报;不宣称未经测试验证的准确率。
四、设计功能
  • 跌倒检测:MaixCam本地运行YOLO,识别跌倒事件并输出结果。
  • 情绪识别:情绪检测在设备端运行,可在本地得到识别结果。
  • 文字聊天陪伴:联网调用DeepSeek,实现文字输入与文字回复。
  • 识别结果展示:将跌倒相关提示和情绪状态呈现在迪文屏对应页面。
  • 语音提醒播报:天问模块承担提醒信息播报,在异常提示时向老人发出语音提示。
  • 页面交互:围绕居家监护场景设置首页、安全监测、语音聊天、告警记录等功能页面,支持触摸操作与信息查看。
  • 设备注册与页面配置:通过迪文云开发者平台注册对应设备并设计显示页面。
  • 功能边界控制:本地识别不依赖DeepSeek,云端仅用于文字聊天,不用于跌倒和情绪模型推理。
  • 后续优化方向:针对复杂光照、遮挡等场景补充测试,评估长时间运行的稳定性与误报情况,继续优化适老化字体、操作与提示,并根据测试结果迭代识别与提醒策略。


视频链接:https://www.bilibili.com/video/BV17dsa6HEHs




作品代码:


本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

x
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

QQ|Archiver|手机版|小黑屋|迪文科技论坛 ( 京ICP备05033781号-1 )

GMT+8, 2026-11-20 09:48 , Processed in 0.038772 second(s), 23 queries .

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表