基于健康计算结果,构建全生命周期闭环照护体系,融合智能机器人、非药物认知干预、个性化健康指导、智能康复训练,优化老年人健康管理策略,提高老年人的整体福祉。
l 智能照护机器人:通过机器人本体及运动控制、环境感知与导航、情感认知与表达等关键技术,实现了机器人在养老服务场景中的自主导航、情感交互和个性化服务。
l 智能心理监护:通过视频监控和AI服务,建立个体和群体心理常模,提供定制化干预方案,实现了对个体心理状态的自动识别、异常预警和个性化干预。
l 全周期闭环管理智能照护平台:通过综合评估、自动诊断、照护方案生成与实施监管,实现了老年人健康管理的全周期闭环反馈。创新性地将麻将元素融入认知评估,开发了数字麻将系统和长者故事系统,帮助非专业照护者深入了解老人需求,提供个性化照护措施。
(1)智能照护机器人
基地聚焦机器人照护的人工智能关键共性技术,针对机器人照护中的不同层面的难题,与美国北德克萨斯大学、日本德岛大学等合作开展机器人本体及运动控制、环境感知及导航、情感认知与表达等方面的研究。在机器人本体及运动控制方面,采用原创的基于模型的全身动量控制算法,研发了具备跳跃能力的全尺寸人形机器人,实现了量产机型上的整机连续弹跳与高速行走能力;在环境感知与导航方面,基于SLAM技术,研究了边界点优化、多步路径规划策略及点线特征的SLAM系统,提升了机器人在复杂环境中的自主导航能力;在情感认知与表达方面,通过语音情感识别、视觉情感识别、多模态情感融合、语音情感合成、面部表情生成和肢体动作表达等技术,使机器人能够实现自然、流畅、富有情感共鸣的人机交互,满足养老服务场景下的情感交互需求。此外,机器人利用计算机视觉技术识别使用者的面部表情、肢体动作和姿势,借助激光雷达、红外线传感器、GPS等技术实现室内外自主导航,并通过大模型、语音识别、知识图谱和个性化推荐等技术,提供个性化的情感陪护和服务优化。
成果获得科技进步省部级奖项1项,多次在国际机器人大赛中进入前四名,并赢得国内仿真足球机器人比赛冠军。方宝富老师荣获2023年度中国人工智能学会“中国数字工匠年度人物”,基地还获得了2021年高校机器人及人工智能教育教学成果奖(优秀案例)特等奖和中国发明协会创新创业二等奖。这些成果推动了机器人技术在养老服务中的应用。

智能照护机器人的部分荣誉
(2)智能心理监护
在通过网络监控摄像头及现有的网络基础设施对监护目标面部情绪、肢体动作等自动采集处理的基础上,基地与日本国立情报研究所、新加坡国立大学等合作,利用心理学理论和普适心理计算技术相结合,建立个体心理常模、群体心理常模、无感主动检测等技术。在此基础上,研发了智能心理监护,实现提前预警、及时关爱,为心理工作提供可量化的分析工具,为决策层全面掌握心理动态,做出正确引导、处置提供分析依据,提升对监护目标心理问题的发现、分析判断和关爱能力。
技术实现路径是通过点名终端或视频监控设备进行数据采集,数据入库后,运用视频、图像等处理技术对原始数据进行初步清洗,再将清洗后的数据交由AI服务进行特征提取、身份识别、异常情绪检测、复杂情绪检测和非接触式生理信号提取等处理。融合事件日志、行为日志等结构化数据,进行数据深度挖掘分析。在融合数据的基础上建立个体、群体的常模,模型初始化完成后,模型能够实现自主学习功能,进而实现快速甄别时点心理、周期心理异常等管理决策要求,并能够结合群体常模、情绪心理关联模型推断出风险成因。再有风险预警后,系统会给出定制化干预方案的智能推荐供管理人员和心理服务人员参考。在干预完成后一段时间内,系统能给出干预前后的心理状态对比,实现干预效果评估,完成智能心理监护的闭环流程。

智能心理监护系统
在前述研究的基础上,基地还研发了智慧心身测评一体机(定位问题-心理测评)——国内首套智能化心理疾病评测软硬一体设备。智慧心身测评一体机,以专业心理测试量表为基础,以社会人口学信息为辅助,应用无感智能情绪识别、生理信号识别、行为动作分析、语音转写、语义理解、异常检测等算法,结合大数据技术,可对目标人群自动生成全周期多维度的心理档案,实现快速发现风险人员,精准定位心理问题,个性化推送干预建议。可以采集个体的情绪数据、行为数据、心理测试等数据,结合大数据等技术,随时了解个体心理状态,个人报告支持打印及小程序实时查看。提供多种心理干预指导方案,包括在线心理咨询、冥想训练、游戏放松等拓展功能,有效进行情绪状态疏导。

智慧心身测评一体机
(3)全周期闭环管理智能照护平台
基地响应《智慧健康养老产业发展行动计划》中的“创新发展慢性病管理、居家健康养老、个性化健康管理等健康养老服务模式”要求,针对老人监管难、照护人员专业水平参差不齐等问题,以老年人常见慢性病为靶点,基地与美国哈佛大学、波士顿大学、芬兰东芬兰大学等合作,融入适老社会科技科技理念,设计实现了面向老年人的健康监管平台-“护助汇”,实现了老人综合评估、自动诊断、照护方案生成、照护实施措施监管、照护评价的全周期闭环反馈管理系统。评估阶段结合标准化评估工具及各类智能感知技术获取老人数据,诊断阶段集成各类机器学习模型分析老人健康状态,照护方案生成阶段结合知识图谱生成照护方案,实施监管阶段生成照护方案实施计划,评价阶段结合感知数据分析照护方案实施效果。
围绕评估阶段,现有认知评估工具对低教育水平老人不友好、老人接受度低的问题,基地团队调研发现麻将在中国老年人群体中拥有庞大受众,将麻将作为认知筛查的载体很容易在老年群体内传播。为此,团队基于MoCA量表,将麻将元素融入到认知评估中,提供了一种对老年人更为友好的认知筛查方案。方案包括三套系统:
1)基于麻将的认知评估量表:和MoCA类似,《基于麻将的认知评估量表》的考察范围覆盖了语言记忆、执行力、视觉空间、注意力、工作记忆和抽象推理等八个人类认知域,包含麻将牌的记忆、排序等任务。
2)“数字麻将”游戏APP:将《基于麻将的认知评估量表》的载体由纸质迁移到数字APP,可在手机或者平板电脑上运行。其考察范围和量表一致,同样覆盖八个人类认知域。
3)数字麻将系统:在“数字麻将”游戏的基础上,利用物联网技术将数字化认知评估进行了实体化。共包含5项测试任务,老年人在移动数字麻将牌时,麻将牌的移动轨迹会上传至云平台中,专家可远程查看这些数据,并完成对老年人认知的初步筛查。

基于麻将元素的认知筛查工具
围绕实施阶段,老年人个性化干预的需求,特别是老年人由于社会隔离与孤独所带来的各类心理问题,基地研发了长者故事系统,收集和自动化整理老年人的生活故事,并进行数据挖掘,为老年人制定个性化照护措施的提供数据基础和决策支撑。收集部分基地创新性地整合了大模型引导地对话技术,引导非专业照护者与老人开展对话交流,从而更深层次挖掘老人需求,整理部分基地实现了老人叙事内容的关键事件抽取、并自动化组织为层次结构,便于照护者快速了解老人需求,更进一步提供了友好地可视化展示系统。该系统为深入了解老年人、与老年人建立联系提供了便捷化工具,贯彻了“以人为本”的护理理念。

数字化叙事工具
这些成果已在上海、合肥、兰州等多个地区的医院、养老机构、社区进行落地应用,成果转化62.1万,孵化高新技术企业一家,出版了专著2部,获得波士顿大学Wing Tat Lee awards、美国医学科学院发起的全球健康长寿创新大赛(中国区)二等奖、以及林护杰出社会工作奖等。

全周期闭环管理智能照护平台的部分荣誉