網易雲音樂AI虛擬偶像“樂靈”正式出道 可實現24小時實時彈幕互動

6月8日,網易雲音樂LOOK直播AI虛擬偶像“樂靈”正式出道,同步開啓LOOK直播首個3D視頻AI直播間。

“樂靈”是由網易雲音樂旗下直播品牌LOOK直播和網易伏羲基於有靈AI虛擬人技術打造的虛擬偶像,同時具備語音互動、彈幕互動、歌曲演唱、舞蹈聯動等功能,旨在爲用戶提供24小時“陪伴式”的音樂互動體驗。

不同於其他以二次元形象示人的虛擬人,“樂靈”的形象更接近真實的主播,是一名從“雲村”走出來的暖男。據LOOK直播官方介紹,“樂靈”今年十八歲,性格積極陽光,身着衛衣,頭戴鹿角。他的口頭禪是“希望推薦的這首歌你會喜歡”;“聽歌的時候注意耳機音量哦”充滿治癒力,可以24小時陪伴用戶,同時滿足用戶在音樂直播中的互動需求和情感需求。

值得注意的是,虛擬偶像“樂靈”能爲用戶提供和真人直播一致的服務,兼具娛樂性和趣味性。首先,在用戶進入直播間時,“樂靈”會跟用戶打招呼;同時,“樂靈”可以在直播間與用戶進行實時的彈幕互動,並生成連貫自然的動作和表情,讓虛擬形象更加生動。此外,“樂靈”還可以根據用戶點播的歌曲,與歌曲風格、節奏相符的舞蹈,大幅提升用戶體驗。

樂靈在直播間與用戶互動

虛擬偶像“樂靈”豐富完善的互動機制的背後是網易伏羲領先的AI技術。據悉,“樂靈”已經基於海量數據完成了人類語言模型訓練,基於NLP技術(自然語言處理技術),“樂靈”可以對彈幕進行自動分詞、句法分析,並根據上下文信息生成符合人設的回答。

此外,通過虛擬人智能驅動技術,“樂靈”還可以根據輸入語音的節奏、情感等聲學特徵,生成自然連貫的動作和表情,並結合虛擬人骨架信息,快速生成舞蹈動作。相比於動作捕捉、美術手工等傳統方式,該技術能最大限度的降低虛擬人舞蹈動作的製作成本。

“樂靈”形象

本次出道的“樂靈”集製作、演唱、舞蹈於一身,是有靈AI虛擬人技術在應用領域的一次全面升級。據悉,網易伏羲是國內專業從事遊戲和泛娛樂產業人工智能研究和應用的頂尖機構,研究方向包括強化學習、圖像動畫、自然語言、虛擬人、用戶畫像、大數據平臺、雲計算平臺、雲遊戲等領域,此前已成功支持“曲師師”、“開心姐姐”等虛擬IP形象的製作。

近年來,AI虛擬人的應用場景正在不斷擴大,具有較強的市場潛力。一方面,2020年疫情影響下,直播行業快速發展,主播的市場需求同步提升;另一方面,5G和AI技術的廣泛應用,也讓虛擬人的開發門檻不斷降低,早期孵化的衆多虛擬IP收穫衆多95後網民的喜愛,逐步走向主流市場。

未來,LOOK直播和網易伏羲雙方將以虛擬偶像爲核心,持續推動像“樂靈”這樣的虛擬IP應用至娛樂直播、廣告代言、遊戲解說、教育等衆多行業,把前沿的AI技術和產品開放給更多合作伙伴。