您現在的位置是:首頁 > 棋牌

火山引擎RTC 用技術打破虛擬偶像與現實的次元壁

  • 由 驅動之家 發表于 棋牌
  • 2022-10-01
簡介先進的網路對抗策略保障虛擬偶像演出過程穩定流暢火山引擎 RTC 針對虛擬偶像線下演唱會場景制定了弱網對抗方案,基於實時、精準的網路預測和自適應擁塞控制策略,透過應用FEC、ARQ、HARQ、自適應 Jitter Buffer、自適應位元速率

褚贏參悟神之一手了嗎

1962年,貝爾實驗室的 IBM 7094計算機,這是人類歷史上第一臺會唱歌的計算機,這也形成了最早的虛擬偶像概念;1990年,日本動畫製作方以《超時空要塞》中女主角林明美的形象製作發行專輯,創造了虛擬偶像的雛形。此後,虛擬偶像如雨後春筍般出現在大眾的視野內:2004年,人氣偶像E欣欣面世;2007年“初音未來”、2012年“洛天依”、2016年“絆愛”。

國民虛擬偶像A- SOUL

2020年11月底正式出道的國民虛擬偶像女團A-SOUL ,五位性格迥異的少女向晚(AvA)、貝拉(Bella)、珈樂(Carol)、嘉然(Diana)、乃琳(Eileen)走到一起,為共同的偶像目標努力,伴隨粉絲的互動應援和陪伴成長。

雖然出道僅一年多的時間,但A-SOUL在B站、抖音、微博等平臺,都已經擁有大量粉絲。嘉然在B站目前已擁有160萬以上的粉絲,並在不斷增長。嘉然今年的生日會艦長數16000+,突破了B站艦長數歷史,位居第一。

火山引擎RTC 用技術打破虛擬偶像與現實的次元壁

伴隨技術的演進,A-SOUL也在逐漸打破虛擬與現實的次元壁,背後的音影片技術支撐,讓虛擬偶像與粉絲實現實時互動,更有望帶來與真人偶像同樣的參與感與沉浸感。

嘉然百萬粉絲AR直播:A-SOUL融入到現實場景中,演唱《最炫民族風》、《對面的女孩看過來》等的熱門歌曲,為百萬粉絲送上了一場長達3個多小時的直播盛宴,增強直播場景的真實感和沉浸感,以更加多元化的形式帶給粉絲歡樂。此外,藉助彈幕的方式與粉絲進行互動,給粉絲帶來更強的參與感。

火山引擎RTC 用技術打破虛擬偶像與現實的次元壁

2021 Bilibili World 線下演唱會:A-SOUL以出道單曲《Quiet》作為開場曲,出現線上下真實演唱會現場的大螢幕上,引發現場千人合唱,粉絲揮舞雙手,高舉熒光棒,享受音樂的魅力,熱情經久不息,帶來跨次元溝通的全新體驗,A-SOUL五位成員頻頻與粉絲互動,讓現場粉絲幾度尖叫不斷為之瘋狂,全場氣氛直達沸點。

火山引擎RTC 用技術打破虛擬偶像與現實的次元壁

高畫質實時是互動“真人”感的必要條件

虛擬偶像如何更“真人”,除了人物設計、表情的打磨外,與粉絲互動的實時性、畫面的清晰度更是“真人”感的必要條件,這也對實時音影片傳輸的技術方案提出了更高的要求:

超低延時

虛擬偶像AR直播場景的直播畫面需要虛擬偶像和真實場景合成,通常來說,虛擬偶像與真實場景是兩個影片源,為了保持偶像和真實場景良好的互動性和同步性,就需要解決音影片超低延時(50ms以內)傳輸的問題。

高畫質畫面

為了帶來更好的感官體驗,演出畫面就必須高畫質。通常需要 1080P(60fps) 甚至更高的影片規格,那相應的解決方案就需要在保證流暢性、穩定性、低延時的前提下,還能夠保證虛擬偶像演出畫面的高畫質晰度,帶給觀眾身臨其境的體驗。

複雜網路環境

線下演唱會因現場觀眾較多,網路環境也就更為複雜和惡劣。為了還原真人線下演出的體驗效果,需保證遠在動捕棚的虛擬偶像與現場觀眾進行高畫質、高流暢的實時音影片互動,因此要制定特殊的策略和方案來對抗此類複雜網路環境。

更貼近業務場景的RTC服務

為了更好解決行業痛點,火山引擎影片雲基於位元組跳動音影片技術能力,透過對底層架構、產品能力進行全面最佳化,為客戶提供貼近業務場景的音影片產品與服務。

50ms超低延時傳輸方案助力虛擬偶像業務發展

火山引擎 RTC 基於對底層技術架構的不斷最佳化,針對虛擬偶像場景提供專屬超低延時傳輸方案,1080P(60fps)高畫質畫面的傳輸延時可低至50ms。

先進的網路對抗策略保障虛擬偶像演出過程穩定流暢

火山引擎 RTC 針對虛擬偶像線下演唱會場景制定了弱網對抗方案,基於實時、精準的網路預測和自適應擁塞控制策略,透過應用FEC、ARQ、HARQ、自適應 Jitter Buffer、自適應位元速率下發等弱網策略可以實現50%丟包無感知恢復,80%丟包情況下依然可以保證音影片體驗流暢,保證演出的互動性和同步性。

火山引擎實時音影片團隊已為 A-SOUL 的螢火蟲漫展、BW(Bilibili world)、嘉然百萬粉絲AR直播等多場活動提供技術支援,保障 A-SOUL 的虛擬偶像演出順利進行。

Top