【新華社】跨越千里 杭州科技企業(yè)“隔空”指揮機器狗探火山
新華社客戶端浙江頻道9月20日電(記者張璇)身處杭州的工程師通過一部手機,成功操控了位于內(nèi)蒙古烏蘭察布市烏蘭哈達(dá)火山的一只機器狗。起立、右轉(zhuǎn)、越障……隨著操作人員發(fā)出指令,千里之外的機器狗在火山碎石坡上幾乎實時響應(yīng)。

“想要實時操控千里之外的機器狗,首先必須解決延時問題?!?9日,在AI大模型賦能大視頻產(chǎn)業(yè)高質(zhì)量發(fā)展研討會上,當(dāng)虹科技副總裁吳奕剛表示,企業(yè)研發(fā)的BlackEye Vision機器人采用超遠(yuǎn)距離遠(yuǎn)程控制系統(tǒng),把端到端的延時控制在80毫秒以內(nèi),所以操控起來和現(xiàn)場近距離操控一樣絲滑。
這一技術(shù)的難點在哪?吳奕剛表示,跨越千里的遠(yuǎn)程操控對機器人的感知能力和信息傳輸能力都提出了巨大挑戰(zhàn),并且火山附近屬于弱網(wǎng)環(huán)境。該技術(shù)的特點是依托于BlackEye多模態(tài)空間大模型的壓縮能力,先將高清視頻流進行10—100倍的壓縮,再通過AI畫質(zhì)增強算法,確保在低帶寬環(huán)境下也有高清視野,把現(xiàn)場復(fù)雜的環(huán)境信息傳回給操控人員。
“這意味著,機器人超遠(yuǎn)距離遠(yuǎn)程操控系統(tǒng)在地震、特殊作業(yè)等斷網(wǎng)環(huán)境中也能發(fā)揮重要作用?!眳寝葎偙硎?,通過遠(yuǎn)程操控的方式使機器人在復(fù)雜的環(huán)境中執(zhí)行任務(wù),其實是一邊完成真實任務(wù),一邊積累高價值操作數(shù)據(jù),為后續(xù)的模仿學(xué)習(xí)與離線強化學(xué)習(xí)提供“燃料”。
值得一提的是,BlackEye Vision還具備多模態(tài)處理能力——視頻、音頻、雷達(dá)點云、控制信令、文本信息都能同步傳輸。這意味著,操控人員不僅能看到高清影像,還能通過三維空間數(shù)據(jù)感知地形起伏、障礙物距離,獲得接近真實的臨場感。尤其是遇到煙塵、霧氣等可見光視頻識別困難時,雷達(dá)點云數(shù)據(jù)就可以派上大用場。
現(xiàn)場業(yè)內(nèi)人士表示,遠(yuǎn)程操控是機器人走向具身智能的必由之路。未來,機器人很可能呈現(xiàn)“具身智能+遠(yuǎn)程操控”的融合形態(tài)。而在具身智能真正到來的時候,遠(yuǎn)程操控也將在具身機器人“失靈”的時候起到“接管”的兜底作用。


掃碼領(lǐng)資料
掃碼看視頻