迪文科技论坛

 找回密码
 立即注册
搜索
查看: 5|回复: 0

【分享】养老院智能情绪看板系统

[复制链接]

1

主题

0

回帖

26

积分

新手上路

Rank: 1

积分
26
发表于 昨天 22:01 | 显示全部楼层 |阅读模式
一、 硬件电路系统
EKT043B开发板,迪文串口屏,N32G452开发板

二、 软件开发工具
DGUS_V7.643软件、drawio、嘉立创等

三、 项目概述
本项目基于迪文串口屏设计并实现了一套应用系统。系统主要功能包括:
(1)个人情绪监测分析:MaixCAM端通过检索已经录入的个人信息确定目标老人身份,随后系统连续取帧分析其面部表情,迪文屏端将其实时情绪波动以动态折线图形式直观呈现,并同步生成个性化的关怀建议,辅助管理员了解情况并及时干预。
(2)群体情绪综合分析建议:当在场人数不少于 3 人时,群体统计判定为有效样本(不足 3 人标记为“样本量不足”并给出提示),以进度条形式显示 7 类情绪占比;同时终端同步采集环境的音量、光照及温湿度数据并以折线图呈现,随后将环境指标与群体情绪做关联分析并给出综合建议。
(3)个人信息管理:在迪文屏端可查看已录入老人的档案卡片(姓名、年龄、联系方式、家庭住址、监护人姓名及电话),并可通过长按触控进入人脸录入流程,为老人注册或更新人脸特征。说明:档案文字当前由主控预置表下发,屏端的新增/修改/删除为界面设计,持久化存储在后续迭代中实现。
(4)历史记录查询:以曲线形式回看当日“群体开心指数”与情绪变化,并生成当日情绪总结;7 日汇总报告为屏端历史页的预留区域,当前以预置数据展示,待接入 Flash 跨日存储后实现真实统计,为管理员关注老人长期心理状态、调整活动方案提供依据。

四、 开发步骤
本系统的开发过程分为以下几个关键阶段,实现了从素材收集到界面设计的全流程开发:
1. 界面设计与素材准备:
系统UI基于迪文DGUS_V7.643开发软件完成,整体视觉风格采用温馨的卡通手绘调性,以适配养老院看板的易读性与亲和力需求。界面素材包括扁平化的情绪表情图标、环境传感器图标(声音传感器、光照、温湿度)以及暖色调渐变背景与边框贴图,借助WPS的PPT功能和画图工具进行辅助处理与适配。
功能页面规划为:
群体情绪分析页以横向进度条呈现愤怒、厌恶、惊恐、低落、平静、惊讶、开心 7 类占比,并并列展示声音 dB、光照 lux、温湿度卡片;
个人情绪曲线图页,左侧有录入系统的人员数据,点击即可在右侧查看具体的个人情绪,右下角还有针对当前情绪和个人提供给护工的建议。
环境指标详情页分别以曲线图呈现声音活跃度、光照度与温湿度的当日变化,左侧设置“行动建议”与“情绪关联分析”区域;历史记录页以“群体开心指数”曲线与“今日总结”“7日总结报告”文本区呈现趋势回顾。
在控件配置层面,按照迪文屏变量地址规范完成数据绑定——0x1700对应在场人数,0x1710至0x1770对应各情绪类别占比,确保主控通过串口下发的数据能够精准映射至对应控件,驱动看板刷新。
2. 硬件和元器件准备:
系统采用“感知—统计—显示”三层分离的分布式硬件架构,以适应养老院活动室对低功耗、低维护与稳定运行的要求。感知层核心为 MaixCAM Pro(含摄像头与 TF 卡),承担本地 AI 图像推理与身份/表情识别;统计层选用 N32G452 主控板,利用其片内多路 12 位 ADC、USART、I2C 等外设完成传感器采集、量程换算、协议解析与转发;显示层为 7 英寸迪文 T5L 智能屏(800×480),屏内 C51 负责 ASCII 帧到变量地址的映射与控件刷新。
架构层级
核心硬件
主要职责
通信接口
感知与推理层
MaixCAM Pro
连续取帧;YOLOv8n-face检测→5点对齐→表情分类三级流水线,输出7类情绪;置信度<0.5的样本仅作界面提示
UART(与N32通信)
控制与业务层
N32G452
挂载环境传感器;每人近6次情绪多数投票、15秒群体帧下发、1秒人数刷新;灯控与OLED联动
UART、I2C、ADC、GPIO
人机交互层
迪文T5L智能屏(7英寸,800×480)
显示与交互终端:屏内C51完成ASCII帧到变量地址的映射与控件刷新
UART
外围感知
各类传感器
采集光照、声音、温湿度、人体活动等环境数据,提供本地状态指示
I2C、模拟输出、数字电平

外围元器件包括:光敏电阻光照模块(模拟 AO 接 ADC 换算 lux,数字 DO 输出强弱阈值,BH1750 为可选 I2C 方案),用于光照曲线与补光/灯控联动;声音传感器(模拟 AO + 数字 DO),采集声压峰峰值并换算为 30~90 dB,参与群体活跃度辅助判断;DHT11 温湿度模块(单总线)与 HC-SR501 人体感应模块(数字电平);以及四路 LED 信号灯与 SSD1306 OLED 显示屏(I2C),用于本地状态指示与脱屏诊断。
元器件名称
规格
在系统中的具体功能
MaixCAM Pro
带摄像头、触摸屏、外壳及TF卡
负责边缘视觉AI推理,输出每帧有效人脸数及各类表情计数;执行暗光、偏转角过大、遮挡等质量门槛过滤;运行本地端侧逻辑,不上传原始图像。
N32G452 主控开发板
多路 12 位 ADC、5 路 USART、I2C/SPI
作为实时控制与协议中枢:接收视觉端行帧并转发曲线/建议帧;完成人数刷新、群体占比、传感器量程换算、四路信号灯与 OLED 显示
迪文T5L智能屏
800*480
作为纯显示终端,通过变量地址(如0x1700在场人数、0x1710-0x1770各类情绪占比)接收数据,刷新进度条、曲线及“建议关注”软提示界面。
光照传感器
模拟AO+数字
AO经ADC换算为照度并驱动光照曲线;DO输出强弱阈值;参与补光与照明联动,不直接丢弃人脸帧
声音传感器(KY-037)
模拟 AO + 数字 DO
连采 240 次取峰峰值换算为 30~90 dB;驱动声音曲线、档位图标与“活动室活跃度”建议,不做语音识别
DHT11温湿度模块
单总线数字输出
采集环境温湿度数据,用于计算“环境舒适度指数”,并支持分析闷热等不同温湿度条件下的情绪分布变化。
HC-SR501 人体感应模块
数字电平输出
判定活动室是否有人:有人且偏暗才点亮补光灯,人离开后延时 5 秒熄灭;无人时 OLED 轮换到诊断页,不控制摄像头采集
四路 LED 信号灯(红/黄/绿/蓝)
数字电平控制
把统计结果物理化:红灯=负面≥50%,绿灯=正面≥50%,蓝灯=平静≥35%且为最大类,黄灯=负面≥30%/惊讶≥30%/人数<3 慢闪;无样本则黄灯慢闪

3.外壳设计:
4.系统联调与功能测试:
11 月 14 号、15 号、17 号进行长时间测试,将群体开心指数输出为曲线并截图留存,如下三张图所示:


五、视频链接
  B站链接:https://www.bilibili.com/video/BV1LZs86GEtz/?spm_id_from=333.1387.upload.video_card.click

六、作品附件
  



本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

x
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

QQ|Archiver|手机版|小黑屋|迪文科技论坛 ( 京ICP备05033781号-1 )

GMT+8, 2026-11-20 09:48 , Processed in 0.053655 second(s), 23 queries .

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表