打造“有情感”的機(jī)器人，讓科技更有溫度——專(zhuān)訪(fǎng)李海洲、朱建團(tuán)隊(duì)
當(dāng)老齡化社會(huì)遇見(jiàn)快節(jié)奏生活，如何安放長(zhǎng)輩們無(wú)人傾聽(tīng)的孤獨(dú)？科技能否讀懂人類(lèi)的情感渴求？為此，香港中文大學(xué)（深圳）李海洲教授與朱建教授團(tuán)隊(duì)聯(lián)合研發(fā)了智能情感交互機(jī)器人——“小深”。它不僅僅是一個(gè)機(jī)器人，更是一個(gè)旨在提供有溫度陪伴的智能伙伴。
為實(shí)現(xiàn)有溫度的陪伴，“小深”能夠進(jìn)行大模型驅(qū)動(dòng)的實(shí)時(shí)語(yǔ)音對(duì)話(huà)，并實(shí)現(xiàn)接近人類(lèi)的面部情感表達(dá)，融合了語(yǔ)音、表情與情緒，為用戶(hù)帶來(lái)溫暖而智能的互動(dòng)體驗(yàn)。
?智能情感交互機(jī)器人“小深”的技術(shù)核心在于，交互時(shí)我們可以實(shí)現(xiàn)視覺(jué)跟蹤以及對(duì)用戶(hù)溝通時(shí)的打斷，并且實(shí)時(shí)響應(yīng)。項(xiàng)目通過(guò)擬人化嘴部動(dòng)作與大小模型協(xié)同，讓交流更自然，旨在成為人類(lèi)身邊理解情緒、回應(yīng)關(guān)切的智能伙伴。
?
技術(shù)亮點(diǎn)
- 表情豐富：通過(guò)創(chuàng)新的仿生設(shè)計(jì)與AI算法協(xié)同，展現(xiàn)微笑、驚訝、思考等豐富面部表情。
- 對(duì)話(huà)流暢：利用多模態(tài)大語(yǔ)言模型，實(shí)現(xiàn)機(jī)器人的自主對(duì)話(huà)，降低對(duì)話(huà)過(guò)程的滯后性。
- 聲形情并茂：有效解析對(duì)話(huà)過(guò)程的情感信息，將聲音、表情及情緒有機(jī)結(jié)合起來(lái)，生成富有同理心的交流過(guò)程。
應(yīng)用場(chǎng)景
- 養(yǎng)老陪護(hù)：陪伴老人交流聊天，排解老人孤獨(dú)感，提供情緒價(jià)值。
- 兒童教育： 提供耐心及高效的講解，提高兒童學(xué)習(xí)樂(lè)趣。
- 客戶(hù)服務(wù)：降低人工成本，提供良好的客戶(hù)體驗(yàn)及服務(wù)效果。
朱建教授表示：“未來(lái)的老年人如何得到照顧，尤其是情感上的交流，是一個(gè)迫切的問(wèn)題。”憑借這一創(chuàng)新設(shè)計(jì)，9月14日，“小深”在首屆深圳康養(yǎng)機(jī)器人大賽中榮獲銅獎(jiǎng)，展現(xiàn)了科技服務(wù)人文的溫暖力量。
智能情感交互機(jī)器人“小深”是香港中文大學(xué)（深圳）在人工智能與機(jī)器人技術(shù)方面的深度融合。在項(xiàng)目中，李海洲教授團(tuán)隊(duì)主導(dǎo)語(yǔ)音交互模塊的開(kāi)發(fā)，通過(guò)大小模型協(xié)同技術(shù)，賦予“小深”靈敏的“聽(tīng)覺(jué)”。朱建教授團(tuán)隊(duì)則負(fù)責(zé)情感的表情化呈現(xiàn)，將語(yǔ)音內(nèi)容實(shí)時(shí)映射為生動(dòng)的面部表情，構(gòu)建了機(jī)器人精準(zhǔn)的“視覺(jué)”表達(dá)。雙方依托大學(xué)開(kāi)放合作的科研平臺(tái)，通過(guò)跨學(xué)科領(lǐng)域的深度融合，共同鑄就了此次的創(chuàng)新成果。
團(tuán)隊(duì)成員合影
李海洲院士強(qiáng)調(diào)，參賽重在鍛煉學(xué)生“解決實(shí)際問(wèn)題的能力”。這與人工智能學(xué)院的培養(yǎng)目標(biāo)一致：不僅使學(xué)生“使用人工智能工具”，更要“制造人工智能工具”，從而成為推動(dòng)社會(huì)進(jìn)步的未來(lái)力量。
智能情感交互機(jī)器人“小深”作為香港中文大學(xué)（深圳）在人工智能與機(jī)器人技術(shù)交融的科研成果，凝聚著科技精度與人文溫度的智慧，未來(lái)發(fā)展?jié)摿o(wú)限。研發(fā)團(tuán)隊(duì)將持續(xù)深耕技術(shù)迭代與場(chǎng)景拓展，推動(dòng)“小深”及同類(lèi)智能交互產(chǎn)品從“實(shí)驗(yàn)室成果”走進(jìn)“多元生活場(chǎng)景”。讓人工智能更精準(zhǔn)地契合各行產(chǎn)業(yè)的需求，讓人工智能賦能的溫暖更真切地滲透人類(lèi)日常，讓每一次交互都充滿(mǎn)科技與人文的力量與關(guān)懷。
?
學(xué)生記者：秦薇雅 2023級(jí) 數(shù)據(jù)科學(xué)學(xué)院 學(xué)勤書(shū)院
? ? ? ? ? ? ? ? ? 王哲 2024級(jí) 音樂(lè)學(xué)院 祥波書(shū)院
攝像：尹一智 張凌康
剪輯：張凌康
