多人AR濾鏡這樣玩,Facebook AR視頻通話解析

編者按:本文來自微信公眾號“青亭網”(ID:qingtinwang),編輯:Esther,36氪經授權發布。

作為社交平台起家的Facebook,在AR/VR的戰略上也少不了社交的元素。在Quest和Quest 2推動下,出現了越來越多支持跨平台多人交互的VR游戲,一些健身應用也支持多人互動/對戰,與此同時越來越多的VR用戶,也為多人VR,甚至是未來的《Facebook Horizon》平台和推動VR普及打下基礎。

而在AR方面,Facebook在近期舉行的F8 Refresh線上活動中,也公佈了基於視頻通話的AR功能:Multipeer API,利用該工具,開發者可為多人視頻通話加入各種有趣、沉浸的AR特效。

實際上就在前不久,同樣是社交平台的Snapchat也推出了多人AR濾鏡功能Connected Lens,可以讓使用者共享AR內容,一邊實現遠程AR互動,一邊同步聊天。比如,你可以和好友在AR模式中遠程拼積木,查看樂高積木的動態效果等等。

如此來看,多人AR將成為未來一種趨勢,而這種趨勢最初的形態可能是基於AR濾鏡。近年來,Niantic曾多次展示多人AR游戲的效果,比如此前的5G AR游戲體驗:《Codename:Urban Legend》,當然Niantic所展示的多人AR體驗從未正式發布,這可能是考慮到使用者網絡環境不同、運行延遲等需要解決的實際問題。

因此,如果在現有的視頻通話、AR拍照濾鏡等基礎上,來實現多人AR互動似乎更加實際。那麼,多人AR濾鏡可以有哪些玩法呢?

在F8 Refresh上,Spark AR協作部門總監Chris Barbour談到了未來Facebook對於AR的一些規劃,他表示:Facebook的目標是,打造一個疊加在全世界的大規模AR虛擬架構,可幫助大家實現共享、學習、娛樂,不受地理位置限制。在強大的攝像頭和穿戴式設備幫助下,在未來AR虛擬體驗將與物理世界無縫銜接,讓你與地理位置、物體、其他人實現全新的互動。

Facebook認為,AR眼鏡的成功需要實現兩大前提:

  • 1)發展全球創作者和開發者生態;

  • 2)在全球佈局多樣化的AR內容。

而這種大規模AR的應用場景則包括,遠程社交,比如以AR的形式拜訪遠方的好友,或是用AR眼鏡來拍攝和分享照片及視頻,在特定地點標記持續的AR信息。據悉,Facebook正在研發的AR眼鏡將實現上述功能,雖然可能需要經過多年時間研發,但在此之前,Facebook已經通過Spark AR獲得多方面的技術進步。

Facebook稱,Spark AR已經持續成為世界上規模最大的移動端AR平台,目前已經擁有來自190個國家的60萬以上AR創作者,在Instagram和Facebook上發布的AR濾鏡數量突破200萬。而基於Spark AR打造的AR濾鏡月活人數突破6億。

為了培養更多AR創作者,Spark AR與Facebook Blueprint平台合作推出了AR課程,在前30天就有1.6萬人注冊。

除此之外,為幫助創作者們開發更多樣化的AR內容,Spark AR更新了更多功能,包括:靜態/動態多目標追蹤、多層次分割效果,未來還將推出新的全身追蹤功能,通過手機的前置或後置攝像頭來追蹤全身姿態。

另一方面,Spark AR將推出Multipeer API,讓多個用戶可以在視頻通話中共享AR濾鏡,相當於為多人視頻通話加入可互動的AR特效,不僅可以優化遠程社交的體驗感,還可以通過交互式AR游戲為遠程社交帶來樂趣。

Facebook表示:正確的交流體驗對於社交是關鍵,在2020年視頻通話成為許多人的交流方式,其中AR也起到較大作用。通常,AR在視頻通話中的作用是讓你在自己選擇的場景或濾鏡中社交,比如:模糊背景、改變亮度、加入面部特效、美顏等等。

在視頻通話的時候,你可能覺得即使沒話說也需要說點什麼,但是社交並不只是通過說話,我們認為社交應該是人們在一個具有臨場感的空間中,放鬆的一起互動。

因此,Multipeer API的一大效果是,呈現一個共享的背景(Shared Context),也就是將通話場景設定在一個支持互動、具有臨場感的虛擬空間中。Facebook展示了一款模擬篝火場景的AR濾鏡,你和好友在通話時,可以對著面前的篝火烤棉花糖,而背景還有一隻貓頭鷹在飛,這只貓頭鷹會從一個人的背景飛到另一個人的背景中,彷彿你和好友處在同一個界面空間中。

細節方面,基於Multipeer API打造的AR濾鏡又叫Group Effects,當你開啟視頻聊天室時,可以直接為所有人設置聊天背景。

除了共享背景外,Multipeer API的另一個效果叫做共享的時光,也就是說通過AR通話,你可以與遠方的親朋好友一起慶祝生日,所有對話框中會有AR五彩紙屑、生日帽等效果。

此外,Multipeer API還可以開發多人AR游戲濾鏡,比如一款AR濾鏡可以讓你和好友模擬“穿越火線”的玩法,用嘴“叼著”甜甜圈接力穿過扭曲的路線。

Facebook表示:不管是所有人接力傳遞一個東西,還是一起完成一個目標,重要的是人與人可以一起玩,看到對方的表情、聽到對方的聲音,暫時忘記大家並不在同一個地點。

Conencted Lens

與Snap的Connected Lens相比,Facebook將多人AR濾鏡用於多人視頻通話中,可應用於Messenger、Instagram和Portal等多個平台,應用場景以前置攝像頭為主,目的是增強線上面對面社交

總之,AR濾鏡作為一種營銷、社交、娛樂的工具,在Facebook、Snap等公司推動下不斷在優化,功能和玩法更多樣化,而且效果更加自然。與此同時,通過支持多人社交的AR濾鏡,有望讓更多人瞭解AR的魅力,從而進一步推動AR普及。並且,Facebook通過豐富更多樣化的AR內容,也是為未來的AR眼鏡平台打基礎。

參考:

https://developers.facebook.com/f8/agenda/

本文經授權發布,不代表36氪立場。

如若轉載請註明出處。來源出處:36氪