丁香五月天婷婷久久婷婷色综合91|国产传媒自偷自拍|久久影院亚洲精品|国产欧美VA天堂国产美女自慰视屏|免费黄色av网站|婷婷丁香五月激情四射|日韩AV一区二区中文字幕在线观看|亚洲欧美日本性爱|日日噜噜噜夜夜噜噜噜|中文Av日韩一区二区

您正在使用IE低版瀏覽器,為了您的雷峰網(wǎng)賬號(hào)安全和更好的產(chǎn)品體驗(yàn),強(qiáng)烈建議使用更快更安全的瀏覽器
此為臨時(shí)鏈接,僅用于文章預(yù)覽,將在時(shí)失效
AR/VR 正文
發(fā)私信給李詩
發(fā)送

0

以AR視頻記憶球重現(xiàn)場景記憶,詳解ARKit應(yīng)用Rememball

本文作者: 李詩 2017-12-04 17:06
導(dǎo)語:把你的記憶裝進(jìn)AR視頻記憶球,在相同的地方打開來看一看。

以AR視頻記憶球重現(xiàn)場景記憶,詳解ARKit應(yīng)用Rememball

生命中總有很多美好的瞬間,我們渴望能夠重現(xiàn)。

去年,迪士尼和皮克斯共同打造的動(dòng)畫電影《頭腦特工隊(duì)》就帶領(lǐng)我們?cè)诖竽X記憶中來了一場奇幻之旅。

我們看到在主角茉莉的大腦中,有一座記憶圖書館,這里存儲(chǔ)著黃色、紅色、藍(lán)色、綠色、紫色的水晶球,裝滿了我們歡樂的、憤怒的、憂傷的、厭惡的、恐懼的記憶。當(dāng)控制這些情緒的小人拿出不同的水晶球,茉莉就會(huì)重新經(jīng)歷當(dāng)時(shí)的場景。

以AR視頻記憶球重現(xiàn)場景記憶,詳解ARKit應(yīng)用Rememball

“如果記憶有形狀,應(yīng)該就是水晶球的樣子”,Rememball團(tuán)隊(duì)負(fù)責(zé)人王思前這樣說到。

受到頭腦特工隊(duì)的啟發(fā),王思前和他的團(tuán)隊(duì)一起打造了一款A(yù)R應(yīng)用——Rememball,以AR視頻記憶球的方式重現(xiàn)我們的記憶。

Rememball是一款基于蘋果AR平臺(tái)ARKit的應(yīng)用,11月初上線iOS應(yīng)用商店,目前已有幾千的天使用戶。

還原記憶到真實(shí)場景

以AR視頻記憶球重現(xiàn)場景記憶,詳解ARKit應(yīng)用Rememball

打開Rememball,手機(jī)自動(dòng)開啟相機(jī),點(diǎn)擊屏幕下方的球形按鈕,就可以錄制視頻。

視頻錄制完之后會(huì)生成一個(gè)AR視頻球,它會(huì)懸浮在你視頻錄制的位置。通過應(yīng)用界面,你能看到你錄制的所有AR視頻記憶球,并且能圍繞它們走動(dòng)。視頻記憶球上有角度的標(biāo)記,當(dāng)你移動(dòng)到標(biāo)記的角度時(shí),你能看到視頻球與拍攝的環(huán)境重新融為一體。就像將其在同一地點(diǎn)再現(xiàn)了一般。

以AR視頻記憶球重現(xiàn)場景記憶,詳解ARKit應(yīng)用Rememball

正如他們的標(biāo)語:You are more real than video。他們希望以AR+定位的方式將視頻記憶保存在現(xiàn)實(shí)場景中,并且能夠?qū)⒁曨l記憶還原到當(dāng)時(shí)的場景,就像是記憶重現(xiàn)一樣。

目前,Rememball針對(duì)的目標(biāo)用戶主要是親子。

他們此前曾經(jīng)做了三年的視頻通訊產(chǎn)品,認(rèn)為目前的視頻通訊產(chǎn)品都不能達(dá)成沉浸式的真實(shí)溝通。從垂直領(lǐng)域來看,他們觀察到目前的家庭結(jié)構(gòu)在逐漸崩塌,親子之間的互動(dòng)和陪伴越來越少。他們想做一款溝通、陪伴的視頻產(chǎn)品。他們?cè)谧鲆曨l通訊時(shí)發(fā)現(xiàn)80-90%的視頻錄制都是發(fā)生在親子、親友之間。

基于ARKit的開發(fā)與產(chǎn)品設(shè)計(jì)

自蘋果9月正式發(fā)布iOS 11及ARKit以來,國內(nèi)外不少團(tuán)隊(duì)開始使用ARKit打造AR應(yīng)用。雷鋒網(wǎng)此前曾報(bào)道多篇關(guān)于ARKit的技術(shù)解析文章,也介紹了多款基于ARKit開發(fā)的應(yīng)用。ARKit提供了三大基礎(chǔ)的AR技術(shù):平面檢測、手機(jī)的六自由度位置和坐標(biāo)數(shù)據(jù)、場景照明。這樣,AR游戲可以在現(xiàn)實(shí)世界獲得一個(gè)平面,然后將AR內(nèi)容放置在平面之上,AR內(nèi)容和人可以有運(yùn)動(dòng)交互。但是目前的ARKit由于還不能理解環(huán)境、識(shí)別物體、多人游戲、語音交互等問題限制了應(yīng)用的場景和設(shè)計(jì)。

在與國內(nèi)首款A(yù)RKit打僵尸游戲《Dead Lands》團(tuán)隊(duì)探討時(shí),雷鋒網(wǎng)也發(fā)現(xiàn),ARKit的平面檢測功能還不夠穩(wěn)定,經(jīng)常出現(xiàn)掃描失敗,AR內(nèi)容出現(xiàn)在錯(cuò)的位置等問題。另外,用戶也反饋難以理解AR應(yīng)用的使用方法。

Rememball如何面對(duì)這些ARKit開發(fā)的“坑”的呢?

雷鋒網(wǎng)在體驗(yàn)后,發(fā)現(xiàn)Rememball在產(chǎn)品交互設(shè)計(jì)上有不少細(xì)節(jié)處理。首先,用戶在進(jìn)入App之后,會(huì)看到一個(gè)記憶球中漂浮著的卡通熊貓,語音會(huì)引導(dǎo)你繞著記憶球轉(zhuǎn)圈。在這個(gè)語音引導(dǎo)的過程中,Rememball想要告訴用戶,用戶可以動(dòng)起來,通過走近走遠(yuǎn)來改變與記憶球的交互。

點(diǎn)擊屏幕中間唯一的按鈕錄制視頻后,語音會(huì)提醒你向上滑動(dòng)記憶球就能保存,向下則是拋棄。

保存下來的記憶球上帶有位置和角度信息,這樣當(dāng)你根據(jù)記憶球上的角度信息去觀看時(shí),你會(huì)發(fā)現(xiàn)記憶球中的內(nèi)容與場景完全融合,就像時(shí)間倒流一樣神奇。

Rememball的關(guān)鍵是要把視頻錄制的內(nèi)容與背景環(huán)境無縫結(jié)合,這是怎么做到的呢?

王思前告訴雷鋒網(wǎng),Rememball在錄制視頻時(shí)會(huì)記錄幾個(gè)信息,LBS+GPS+ARKit本身的相對(duì)位置,同時(shí)還加入了圖像識(shí)別的功能去做記憶球中的視頻內(nèi)容與真實(shí)環(huán)境之間的匹配。加上圖像識(shí)別是因?yàn)閮H靠位置信息是不夠準(zhǔn)確的,必須加別的信息來做輔助定位。

在還原的時(shí)候有一套特定的算法,計(jì)算角度信息和記憶球與用戶的相對(duì)位置、在視野中占的比例,然后再還原為拍攝時(shí)的場景。

王思前認(rèn)為AR應(yīng)用的所有操作都應(yīng)該與真實(shí)的行為一致,應(yīng)該去掉屏幕點(diǎn)擊這些操作,目前他們的應(yīng)用除了錄制視頻按鈕,沒有任何的按鍵。他們?cè)趹?yīng)用中內(nèi)嵌了行為分析,如果用戶一直點(diǎn)擊手機(jī)屏幕則說明用戶沒有理解AR應(yīng)用的玩法,那么Rememball會(huì)再出現(xiàn)語音提示。

未來想實(shí)現(xiàn)的是全息通訊

王思前告訴雷鋒網(wǎng),Rememball的想法產(chǎn)生于一年多前,9月ARKit發(fā)布后他們的想法才成形,在11月初上線到現(xiàn)在的一個(gè)月,他們每周能迭代三個(gè)版本。由于王思前做了好幾年的視頻通訊產(chǎn)品,他很熟悉如何去做一款to C的產(chǎn)品。

現(xiàn)在用戶看到的還是Rememball的初代產(chǎn)品,其功能在不斷地迭代。

王思前告訴雷鋒網(wǎng),目前AR視頻記憶球還是2D的,但是他們希望做成3D的,也就是以后記憶球可以直接展開,就像人物重新回到了場景里。而更遠(yuǎn)的未來,他們希望能夠做到全息通話,通過多個(gè)深度攝像頭進(jìn)行三維重建,然后實(shí)現(xiàn)三維的影像通話。

在雷鋒網(wǎng)看來,“全息”當(dāng)然是我們渴望的未來通訊方式,目前,國外微軟、8i,國內(nèi)的Owlii等團(tuán)隊(duì)都在努力用”動(dòng)態(tài)三維重建與傳輸“技術(shù)與AR顯示來實(shí)現(xiàn)”全息傳送“。”三維重建“也被用來保存記憶,例如8i就主打親子,錄下媽媽與孩子之間的互動(dòng)。但是目前三維重建實(shí)現(xiàn)起來成本還很高,需要多個(gè)深度攝像頭,強(qiáng)大的后臺(tái)壓縮傳輸能力。

8i目前已經(jīng)錄制了很多名人、藝術(shù)家的三維重建影像,但是他們似乎沒有找到一個(gè)真正讓這些內(nèi)容應(yīng)用爆發(fā)的點(diǎn)。

Rememball的特色在于他們利用了ARKit的AR技術(shù),同時(shí)加入了圖像識(shí)別等AI技術(shù),使得用戶可以輕松簡單地保存記憶。當(dāng)然,三維影像與Rememball也會(huì)很合適。

以AR視頻記憶球重現(xiàn)場景記憶,詳解ARKit應(yīng)用Rememball

雷鋒網(wǎng)此前也報(bào)道了國外一款A(yù)R與LBS結(jié)合的圖片分享社交應(yīng)用Placie,Placie相當(dāng)于是一個(gè)LBS版本的Instagram,而Rememball要做的是真正的重現(xiàn)場景,更為沉浸,更為私密。

但是,雷鋒網(wǎng)體驗(yàn)多次之后發(fā)現(xiàn),Rememball的這種方式需要用戶很高程度的參與,畢竟,他們要做的不是泛社交的視頻平臺(tái),而是深度的視頻通訊應(yīng)用。

王思前和Rememball團(tuán)隊(duì)5-6個(gè)人屬于第一視頻集團(tuán)旗下,第一視頻投入了不少資金孵化這個(gè)項(xiàng)目。關(guān)于商業(yè)模式問題,王思前認(rèn)為他們目前主要是積累用戶,以后可以依靠APP的開屏廣告,AR內(nèi)嵌廣告等盈利。

雷峰網(wǎng)原創(chuàng)文章,未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。

分享:
相關(guān)文章

編輯

關(guān)注AI業(yè)界、NLP、VR、AR技術(shù)與產(chǎn)品。采訪報(bào)道、行業(yè)交流請(qǐng)加微信“Hanass”
當(dāng)月熱門文章
最新文章
請(qǐng)?zhí)顚懮暾?qǐng)人資料
姓名
電話
郵箱
微信號(hào)
作品鏈接
個(gè)人簡介
為了您的賬戶安全,請(qǐng)驗(yàn)證郵箱
您的郵箱還未驗(yàn)證,完成可獲20積分喲!
請(qǐng)驗(yàn)證您的郵箱
立即驗(yàn)證
完善賬號(hào)信息
您的賬號(hào)已經(jīng)綁定,現(xiàn)在您可以設(shè)置密碼以方便用郵箱登錄
立即設(shè)置 以后再說