技術名稱 CRUSH: 理解社交與人類互動的認知機器人系統
計畫單位 國立臺灣大學
計畫主持人 傅立成
技術簡介
隨著科技發展,社交型機器人成為生活中的管家和陪伴者。本研究旨在構建具自主認知和行為能力的社交機器人系統,包含生物空間認知、人類社交認知和記憶認知,實現人類與機器人的自然互動。研究成果包括自主環境認知、提供服務的AI機器人,具備同理心對話的社交認知模組及記憶輔助功能,並已與企業合作開發。
科學突破性
開發了首個能自主認知環境的AI社交機器人,具備自然語言處理、整合常識知識庫和大型視覺語言模型(VLM)等功能,可導航使用者至目標場景、回答環境問題。此外,也整合多模態情緒辨識、同理對談暨憂鬱偵測等系統,使機器人理解並回應使用者情緒。結合情節記憶模組和生成式AI,提供物件搜尋、記憶輔助等功能。
產業應用性
"酒店、旅遊業:依使用者意圖提供場景導航及問答服務幫助使用者解決問題
 
 醫療、老人照護:在提供情感支持的同時做憂鬱風險評估提供記憶輔助和失物尋找服務
 
 教育、學習:以語言模型及知識圖譜,提供相關解答幫助學生學習理解知識
 
 社交娛樂:透過多模態情緒辨識和情緒聊天功能,提供豐富有趣互動體驗
關鍵字 社交型機器人 認知機器人學 認知心理學 移動型機器人 多模態機器學習 深度學習 系統整合 生成式AI 視覺語言模型 常識推論
  • 聯絡人
  • 張甫浩