騰訊微視人體姿態遷移黑科技加持,用一張照片即可變身“舞林高手”

再也不用羨慕視頻中的舞蹈大神了!6月9日,騰訊微視APP上線照片會跳舞”新玩法用戶只需上傳一張正面照片,即可生成逼真而帶感的跳舞視頻,從《兩隻老虎》跳到《大風吹》,秒變舞林高手。上線第一天,騰訊微視APP“照片會跳舞”特效玩法的體驗人數已超過20萬人,用戶的舞蹈視頻播放量達到2000萬,相關玩法衍生出大量魔性上頭的二創作品,許多用戶通過這一特效實現了和異地親友們同臺共舞的新型“雲社交”。

上傳一張照片,即可秒變舞蹈大神

在騰訊微視APP中,用戶通過搜索“照片會跳舞”關鍵詞,或在拍攝界面找到活動入口後,只需上傳一張正面照片,系統即可對照片進行3D建模,生成以假亂真的虛擬形象,再通過技術能力,使人體模型“舞動”起來,模擬效果十分逼真,動作也十分流暢自然。

實際體驗中,這個“黑科技”的操作也十分簡單。用戶進入活動頁面,點擊“上傳照片”,根據提示上傳符合條件的照片,隨後即可選擇不同的舞蹈模板生成視頻併發布,目前,用戶可以選擇10個舞蹈模板進行體驗。

(微視“照片會跳舞”體驗步驟

在這些模版中涵蓋了廣場舞、宅舞、炫舞、廣播體操多種類型的舞蹈,不僅包括單人舞蹈,還包括多人羣舞,用戶除了自己solo大展舞技,還可以和閨蜜好友家人一起,體驗羣舞的快樂。模板的歌曲也多種多樣,從話題正熱的《大風吹》,到經典復古的廣場舞即視感小蘋果》,甚至還能和老同學齊跳《第2套全國中小學生廣播體操》,一起重溫經典的“時代在召喚”。

騰訊微視APP黑科技,解決人體姿態遷移技術難題

據瞭解,“照片會跳舞”由騰訊QQ影像中心提供技術支持,是微視在前段時間火遍全網的“螞蟻呀嘿”表情遷移玩法的基礎上,推出的多人跳舞動作遷移玩法。與此同時,它也是騰訊QQ影像中心針對人體姿態遷移技術研究的突破性落地,對比行業主流解決方案,用戶參與更加簡單,可玩性更高,實現效果也更好。

在目前主流的人體姿態遷移技術中,想要實現較好的生成效果,一般需要用戶上傳多張圖片或視頻,並需要經過較長時間後臺處理。而騰訊微視APP團隊經過對人體3D重建技術、生成對抗網絡(GAN)的不斷挖掘與優化,最後實現了使用單張用戶圖,就能達到業界需要複雜技術方可實現的人體姿態遷移效果,同時還支持更高分辨率的輸出,並解決了動作僵硬等問題,既保證了舞蹈素材的動作準確性,也使動作更加連貫自然。從表情遷移到動作遷移,微視進一步深挖遷移技術在爆款社交玩法上的延展空間

據瞭解,此前QQ影像中心在AI生成領域已經進行過大量算法的研發和落地工作,如騰訊微視APP中的王者變臉、迪士尼童話臉特效等。此次跳舞功能,使得用戶在騰訊微視APP中的體驗更加豐富有趣,同時也爲用戶之間的交流提供了更豐富的內容