布朗大學(xué)科學(xué)家用VR控制機(jī)器人,并開源項(xiàng)目代碼
盡管自動機(jī)器人能夠獨(dú)立而且出色地完成自己的任務(wù),但仍然存在需要人類介入和控制的情況。由布朗大學(xué)計(jì)算機(jī)科學(xué)家開發(fā)的新軟件能夠支持用戶通過虛擬現(xiàn)實(shí)遠(yuǎn)程控制機(jī)器人,而這將能幫助用戶沉浸在機(jī)器人的環(huán)境之中。軟件能夠通過網(wǎng)絡(luò)將機(jī)器人的手臂和抓爪,以及板載攝像頭和傳感器連接至虛擬現(xiàn)實(shí)硬件。借助手持式控制器,用戶能夠控制器機(jī)器人手臂的位置并執(zhí)行復(fù)雜的操作。用戶可以步入機(jī)器人的金屬皮膚以獲取環(huán)境的第一人稱視圖,或
2018-01-18 07:38:47
來源:中國AR網(wǎng)??

盡管自動機(jī)器人能夠獨(dú)立而且出色地完成自己的任務(wù),但仍然存在需要人類介入和控制的情況。由布朗大學(xué)計(jì)算機(jī)科學(xué)家開發(fā)的新軟件能夠支持用戶通過虛擬現(xiàn)實(shí)遠(yuǎn)程控制機(jī)器人,而這將能幫助用戶沉浸在機(jī)器人的環(huán)境之中。

軟件能夠通過網(wǎng)絡(luò)將機(jī)器人的手臂和抓爪,以及板載攝像頭和傳感器連接至虛擬現(xiàn)實(shí)硬件。借助手持式控制器,用戶能夠控制器機(jī)器人手臂的位置并執(zhí)行復(fù)雜的操作。

用戶可以步入機(jī)器人的金屬皮膚以獲取環(huán)境的第一人稱視圖,或者以第三人稱視角調(diào)查場景。你可以自由切換,尋找最方便完成任務(wù)的視角。而且機(jī)器人和虛擬現(xiàn)實(shí)設(shè)備之間傳輸?shù)臄?shù)據(jù)足夠緊湊,能夠以最低延遲通過互聯(lián)網(wǎng)發(fā)送,以支持用戶遠(yuǎn)程控制機(jī)器人。

布朗大學(xué)科學(xué)家用VR控制機(jī)器人,并開源項(xiàng)目代碼 AR資訊

布朗大學(xué)研究生David Whitney是這一系統(tǒng)的聯(lián)合負(fù)責(zé)人,他表示:“我們認(rèn)為這可以用于需要精巧操作,而且人類不應(yīng)該親臨現(xiàn)場的情景。我們在思考的三個專門用例是拆彈,在受損核設(shè)施內(nèi)完成任務(wù),或者在國際太空站中操作機(jī)器人手臂?!?/p>

這一項(xiàng)目的其他負(fù)責(zé)人包括布朗大學(xué)的本科生Eric Rosen。這兩人都在由計(jì)算機(jī)科學(xué)助理教授Stefanie Tellex負(fù)責(zé)的Humans to Robots實(shí)驗(yàn)室中工作。值得一提的是,他們本周在智利舉辦的國際機(jī)器人研討會上介紹了描述這一系統(tǒng)和評估其實(shí)用性的論文。

即使是高度復(fù)雜的機(jī)器人也常常使用一些相當(dāng)簡單的手段進(jìn)行遠(yuǎn)程控制,通常是鍵盤或者諸如游戲手柄和二維顯示器之類的設(shè)備。Whitney和Rosen指出,這適合駕駛輪式機(jī)器人或者無人機(jī)那樣的任務(wù),但可能不適合更加復(fù)雜的任務(wù)。

Whitney說道:“對于操作機(jī)器人手臂那樣包含多個自由度的機(jī)器,鍵盤和游戲手柄并不是十分直觀?!彼麄冎赋觯瑢⑷S環(huán)境映射到二維屏幕上會限制人們對機(jī)器人所處空間的感知。

Whitney和Rosen認(rèn)為虛擬現(xiàn)實(shí)或許可以提供更為直觀和更加身臨其境的選項(xiàng)。他們的構(gòu)思與映維網(wǎng)早前關(guān)于豐田實(shí)驗(yàn)的報道類似。

延伸閱讀:全身動作映射,豐田用HTC Vive遠(yuǎn)程控制機(jī)器人

軟件利用機(jī)器人傳感器來創(chuàng)建機(jī)器人本身及其環(huán)境的點(diǎn)云模型,然后將其傳輸?shù)竭B接至Vive的遠(yuǎn)程計(jì)算機(jī)。用戶可以透過頭顯來感知相應(yīng)的空間,并在內(nèi)部進(jìn)行虛擬行走。與此同時,用戶還可以通過機(jī)器人手腕上的攝像頭觀看實(shí)時高清視頻,獲取操作任務(wù)的詳細(xì)視圖。

研究人員表示,他們可以為用戶創(chuàng)造一種身臨其境的體驗(yàn),同時保持足夠小的數(shù)據(jù)負(fù)載,使其能夠通過互聯(lián)網(wǎng)進(jìn)行傳輸。舉例來說,位于普羅維登斯的用戶能夠遠(yuǎn)程操作位于馬薩諸塞州劍橋的一個機(jī)器人(彼此之間相隔41英里),令機(jī)器人堆疊一系列的塑料杯。

在另外的研究中,18位新手用戶通過虛擬現(xiàn)實(shí)中完成疊杯操作的速度比傳統(tǒng)的鍵盤顯示器界面高出66%。用戶也表示他們更喜歡虛擬界面,而且他們認(rèn)為操作難度比鍵盤和顯示器界面更加簡單。

Rosen認(rèn)為,任務(wù)執(zhí)行速度的提升是由于虛擬現(xiàn)實(shí)界面的直觀性導(dǎo)致。Rosen說:“在VR環(huán)境中,人們可以像移動自己的身體一樣移動機(jī)器人,所以他們在操作時更本不用多想。這讓人們可以專注于手頭上的問題或任務(wù),不需要花費(fèi)更多的時間去了解如何移動機(jī)器人。”

研究人員計(jì)劃進(jìn)一步開發(fā)這個系統(tǒng)。第一個迭代專注于一個相當(dāng)簡單的操作任務(wù)(機(jī)器人保持固定),而他們希望嘗試更復(fù)雜的任務(wù),比如在操縱的基礎(chǔ)上加入導(dǎo)航移動。他們同時希望嘗試混合自動模式,比如機(jī)器人自身完成一部分任務(wù),而用戶則接管其他任務(wù)。

研究人員已經(jīng)把系統(tǒng)托管至GitHub(點(diǎn)擊前往)。他們希望其他機(jī)械學(xué)研究人員可以進(jìn)行嘗試或創(chuàng)新,從而為我們帶來更優(yōu)或更多的用例。

最新文章
1
趙明離職,榮耀兩大看點(diǎn):IPO與份額止跌
2
TCL智能鎖數(shù)字化工廠落地,研產(chǎn)銷服一體化,構(gòu)建起全鏈路品控體系
3
一加國補(bǔ)方案出爐,1月20號起立減15%、至高優(yōu)惠500元!
4
蘋果在中國又開了一家新店,但銷量大跌了25%
5
2024年冰洗市場總結(jié)及2025年展望
6
2025年量子芯片將行至何處?
7
以舊換新國補(bǔ)2025年將延續(xù),預(yù)計(jì)2025年中國電視市場增長1.4%
8
2024年熱水器市場報告:以舊換新政策帶動市場回暖與結(jié)構(gòu)改善
9
2024年國內(nèi)智能手機(jī)市場迎來復(fù)蘇,vivo以17%的市場份額領(lǐng)跑
10
iOS 18.3 Beta 3上線:蘋果屢屢翻車的功能被禁用
11
折疊屏與AI,誰會是2025智能手機(jī)市場最大亮點(diǎn)?
12
創(chuàng)維百吋電視銷量中國第一,強(qiáng)勢領(lǐng)跑
13
消滅藥丸屏!蘋果屏下Face ID專利曝光
14
追覓、石頭掃機(jī)器加裝機(jī)械臂,國產(chǎn)清潔電器越來越像“機(jī)器人”了
15
力推全棧聯(lián)動式大規(guī)模創(chuàng)新,亞馬遜云科技加速生成式AI價值釋放
16
達(dá)人探訪海信研發(fā)中心,親身體驗(yàn)“開機(jī)3分鐘,滿屋是新風(fēng)”
17
業(yè)界唯一!科大訊飛發(fā)布首個基于全國產(chǎn)算力的深度推理大模型X1
18
斥資134億收購LGD工廠,TCL科技押注LCD市場勝算幾何?
19
12月中國電視整機(jī)出貨量378.5萬臺,同比增長9.7%
20
京東方拿下美國專利榜全球第12!顯示領(lǐng)域唯一中企
關(guān)于我們

微信掃一掃,加關(guān)注

商務(wù)合作
  • QQ:61149512