谷歌黑科技:僅用手機(jī)陀螺儀實(shí)現(xiàn)AR中動(dòng)作追蹤
編譯/VR陀螺今日,谷歌Research團(tuán)隊(duì)在網(wǎng)站上發(fā)表博客稱,為安卓上的Motion Stills(視頻捕捉和觀看app)增加了全新的AR模式。在AR模式下,用戶只需點(diǎn)擊屏幕就可以將有趣的虛擬3D物體放置在靜止,或者移動(dòng)中的水平面上(比如桌子、地板和手上),讓這些物體可以無(wú)縫的和動(dòng)態(tài)的實(shí)時(shí)環(huán)境進(jìn)行互動(dòng)。我們還可以直接錄像以及導(dǎo)出GIF圖和視頻。  這一AR模式由實(shí)時(shí)動(dòng)作追蹤功能所實(shí)現(xiàn),這是基于i
2018-05-03 08:12:44
來(lái)源:搜狐科技??

編譯/VR陀螺

今日,谷歌Research團(tuán)隊(duì)在網(wǎng)站上發(fā)表博客稱,為安卓上的Motion Stills(視頻捕捉和觀看app)增加了全新的AR模式。在AR模式下,用戶只需點(diǎn)擊屏幕就可以將有趣的虛擬3D物體放置在靜止,或者移動(dòng)中的水平面上(比如桌子、地板和手上),讓這些物體可以無(wú)縫的和動(dòng)態(tài)的實(shí)時(shí)環(huán)境進(jìn)行互動(dòng)。我們還可以直接錄像以及導(dǎo)出GIF圖和視頻?! ?/p>

這一AR模式由實(shí)時(shí)動(dòng)作追蹤功能所實(shí)現(xiàn),這是基于iOS版Motion Stills的Motion Text和YouTube上的privacy blur的技術(shù)所實(shí)現(xiàn)的6自由度追蹤,能夠精確的追蹤靜止和移動(dòng)的物體。谷歌的團(tuán)隊(duì)對(duì)這一技術(shù)進(jìn)行的完善和提升,使其可以在任何配備了陀螺儀的安卓設(shè)備上實(shí)現(xiàn)有趣的AR功能?! ?/p>

當(dāng)用戶碰觸屏幕時(shí),Motion Stills AR能夠?qū)⒁粋€(gè)3D的虛擬物體“粘貼”到指定的位置,使其看起來(lái)就像真實(shí)世界的一部分一樣。通過(guò)假定跟蹤表面和地平面是平行的,同時(shí)使用設(shè)備的加速傳感器來(lái)提供手機(jī)相對(duì)于地平面的初始定向,可以追蹤攝像頭的6自由度(3個(gè)平移自由度和3個(gè)旋轉(zhuǎn)自由度)。這讓我們可以精確的改變和渲染虛擬物體。

即時(shí)動(dòng)作追蹤

即時(shí)運(yùn)動(dòng)跟蹤的核心是將攝像機(jī)的平移和旋轉(zhuǎn)估計(jì)分離,將其視為獨(dú)立的優(yōu)化問(wèn)題。 首先,我們只根據(jù)相機(jī)的視覺(jué)信號(hào)確定3D相機(jī)的平移。 為此,我們觀察目標(biāo)區(qū)域的明顯2D映射和跨幀的相對(duì)比例。 一個(gè)簡(jiǎn)單的針孔照相機(jī)模型將圖像平面中的盒子的平移和縮放與相機(jī)的最終3D平移相關(guān)聯(lián)。

為了解決這個(gè)問(wèn)題,我們?cè)谖覀儸F(xiàn)有的跟蹤器中添加了比例估計(jì),并在攝像機(jī)的視場(chǎng)之外追加了區(qū)域跟蹤。 當(dāng)相機(jī)靠近被跟蹤的表面時(shí),虛擬內(nèi)容能夠精確地縮放,這與真實(shí)世界對(duì)象的感知一致。 當(dāng)你在目標(biāo)區(qū)域的視場(chǎng)之外平移時(shí),虛擬物體將重新出現(xiàn)在大致相同的位置。 

在這之后,我們使用手機(jī)的內(nèi)置陀螺儀來(lái)獲得設(shè)備的3D旋轉(zhuǎn)(滾動(dòng),俯仰和偏航)。 估測(cè)的3D對(duì)應(yīng)圖像與3D旋轉(zhuǎn)相結(jié)合,使我們能夠在取景器中正確渲染虛擬內(nèi)容。 而且由于我們分別處置旋轉(zhuǎn)和平移,所以我們的即時(shí)運(yùn)動(dòng)跟蹤方法不需要校準(zhǔn),可以在任何帶有陀螺儀的Android設(shè)備上工作。

———————————

更多新鮮有趣的相關(guān)資訊,歡迎關(guān)注VR陀螺的搜狐號(hào)

原創(chuàng)文章
最新文章
1
趙明離職,榮耀兩大看點(diǎn):IPO與份額止跌
2
TCL智能鎖數(shù)字化工廠落地,研產(chǎn)銷(xiāo)服一體化,構(gòu)建起全鏈路品控體系
3
一加國(guó)補(bǔ)方案出爐,1月20號(hào)起立減15%、至高優(yōu)惠500元!
4
蘋(píng)果在中國(guó)又開(kāi)了一家新店,但銷(xiāo)量大跌了25%
5
2024年冰洗市場(chǎng)總結(jié)及2025年展望
6
2025年量子芯片將行至何處?
7
以舊換新國(guó)補(bǔ)2025年將延續(xù),預(yù)計(jì)2025年中國(guó)電視市場(chǎng)增長(zhǎng)1.4%
8
2024年熱水器市場(chǎng)報(bào)告:以舊換新政策帶動(dòng)市場(chǎng)回暖與結(jié)構(gòu)改善
9
2024年國(guó)內(nèi)智能手機(jī)市場(chǎng)迎來(lái)復(fù)蘇,vivo以17%的市場(chǎng)份額領(lǐng)跑
10
iOS 18.3 Beta 3上線:蘋(píng)果屢屢翻車(chē)的功能被禁用
11
折疊屏與AI,誰(shuí)會(huì)是2025智能手機(jī)市場(chǎng)最大亮點(diǎn)?
12
創(chuàng)維百吋電視銷(xiāo)量中國(guó)第一,強(qiáng)勢(shì)領(lǐng)跑
13
消滅藥丸屏!蘋(píng)果屏下Face ID專利曝光
14
追覓、石頭掃機(jī)器加裝機(jī)械臂,國(guó)產(chǎn)清潔電器越來(lái)越像“機(jī)器人”了
15
力推全棧聯(lián)動(dòng)式大規(guī)模創(chuàng)新,亞馬遜云科技加速生成式AI價(jià)值釋放
16
達(dá)人探訪海信研發(fā)中心,親身體驗(yàn)“開(kāi)機(jī)3分鐘,滿屋是新風(fēng)”
17
業(yè)界唯一!科大訊飛發(fā)布首個(gè)基于全國(guó)產(chǎn)算力的深度推理大模型X1
18
斥資134億收購(gòu)LGD工廠,TCL科技押注LCD市場(chǎng)勝算幾何?
19
12月中國(guó)電視整機(jī)出貨量378.5萬(wàn)臺(tái),同比增長(zhǎng)9.7%
20
京東方拿下美國(guó)專利榜全球第12!顯示領(lǐng)域唯一中企
關(guān)于我們

微信掃一掃,加關(guān)注

商務(wù)合作
  • QQ:61149512