IT之家 9 月 22 日消息，據(jù)微軟亞洲研究院官方披露，該研究院與上海市精神衛(wèi)生中心攜手展開聯(lián)合研究，基于微軟 Azure OpenAI 服務中的多模態(tài)大模型，開發(fā)了利用多種模態(tài)數(shù)據(jù)（如語音、文字、圖片、音樂等信息）的個性化認知訓練框架，為認知障礙患者的認知訓練帶來了新的可能。
IT之家從微軟亞洲研究院獲悉，綜合上海市精神衛(wèi)生中心專家的建議與患者的需求，微軟亞洲研究院的研究員們從易用性、界面友好性、功能專業(yè)性和入門難易度等多個維度出發(fā)，開發(fā)了個性化認知訓練框架“憶我”（ReMe）。該工具以微軟 Azure OpenAI 服務為基礎模型，具備即時交互響應功能，支持文字、圖像、語音等多種模態(tài)的輸入輸出，以對話機器人的形式為用戶提供全新的認知訓練體驗。
從使用流程和功能來看，個性化認知訓練框架“憶我”首先通過手機或可穿戴設備上傳個人記憶內(nèi)容，隨后采用更貼近生活的方式，進行個體化的情景記憶或世界知識的開放性記憶訓練。研究員們還提供了一個訓練框架，讓該領域的醫(yī)生等研究者可以利用內(nèi)置的認知游戲模板快速創(chuàng)建個性化的訓練游戲。除此之外，該工具還包括交互式的評估，以便追蹤患者的認知水平，并根據(jù)需要調(diào)整訓練任務。
不僅如此，微軟亞洲研究院與上海市精神衛(wèi)生中心還在不斷向該訓練框架擴展更多訓練功能和任務，除了開放性的和個體化的訓練任務外，通過語音對話的自然交互體驗，也兼容并實現(xiàn)已被驗證有效的成熟認知訓練任務。例如鍛煉思維靈活性的顏色識別、鍛煉工作記憶的數(shù)學運算等。同時，微軟亞洲研究院也在嘗試基于傳感器技術，通過可穿戴設備以機會感知（opportunistic sensing）的方式記錄日常生活中的重要節(jié)點和事件，促進更便捷的個性化個人記憶訓練。
廣告聲明：文內(nèi)含有的對外跳轉(zhuǎn)鏈接（包括不限于超鏈接、二維碼、口令等形式），用于傳遞更多信息，節(jié)省甄選時間，結果僅供參考，IT之家所有文章均包含本聲明。