近日，微软亚洲研究院与上海市精神卫生中心展开联合研究，借助微软 Azure OpenAI 服务中的多模态大模型以及AI agent技术，开发了个性化认知训练框架“忆我”（ReMe），该工具以微软 Azure OpenAI 服务为基础模型，具备即时交互响应功能，支持文字、图像、语音等多种模态的输入输出，以对话机器人的形式为用户提供全新的认知训练体验。

“忆我”应用界面

据介绍，当前临床上的认知训练主要依靠照护者或治疗师自行开展，或使用软件驱动的数字疗法开展。前者依赖大量人力，成本高昂，给照护者带来了沉重的负担；后者则往往类似于标准化考试，缺乏灵活性，患者仅能解答预设的谜题，与提高认知所需的记忆训练相去甚远。此外，现有的数字疗法在软件应用的便捷性、互动性和直观性方面也存在一定不足，影响了患者的依从性（病人按照医生规定进行治疗的行为）。就认知障碍患者而言，持之以恒的训练对于缓解症状至关重要。

上海市精神卫生中心老年科副主任医师岳玲指出：“认知障碍影响的记忆类型多样，包括工作记忆、情景记忆和语义记忆等，但现有训练任务的设计较为单一，限制了训练内容的广度，很多老人也曾反映游戏内容‘枯燥’、‘没意思’。在多模态大模型出现之前，软件驱动的认知训练主要集中于工作记忆训练，而对于与患者日常生活密切相关的情景记忆和语义记忆训练则鲜有涉及。特别是对于阿尔茨海默病患者，最早受损的往往是与自我相关的记忆。多模态大模型的智能化和个性化特点，为认知训练提供了新的可能性，使其更贴近日常生活。”

功能方面，“忆我”首先通过手机或可穿戴设备上传个人记忆内容，以更贴近生活的方式进行个体化的情景记忆或世界知识的开放性记忆训练。该工具还提供了一个训练框架，让医生和研究者可以快速创建个性化的训练游戏。除此之外，该工具还包括交互式的评估，以便追踪患者的认知水平，并根据需要调整训练任务。

微软亚洲研究院与上海市精神卫生中心还在不断向该训练框架扩展更多训练功能和任务，除了开放性的和个体化的训练任务外，通过语音对话的自然交互体验，兼容并实现已被验证有效的成熟认知训练任务。例如锻炼思维灵活性的颜色识别、锻炼工作记忆的数学运算等。同时，微软亚洲研究院也在尝试基于传感器技术，通过可穿戴设备以机会感知（opportunistic sensing）的方式记录日常生活中的重要节点和事件，促进更便捷的个性化个人记忆训练。

接下来，上海市精神卫生中心计划以此框架为基础，设计认知训练的新方法，开展一系列临床实验，验证这种个性化认知训练框架的有效性，以获得更多的临床证据。微软亚洲研究院也表示，随着证据的逐步积累，将持续对个性化认知训练框架“忆我”进行改进和迭代，期望该工具能够逐渐扩展应用范围，最终能够在社区和家庭环境中帮助提升认知障碍患者的健康水平，减轻看护人员和家属的负担。