在街頭,捲入一場「真人CS」

作者/  IT時報記者 賈天榮

編輯/  潘少穎孫妍 

還記得不久前爆火的遊戲《黑神話·悟空》嗎?在遊戲中,「沉睡」多年的文物和建築「火」了起來,精美的畫面和逼真的效果震撼了玩家的視覺。

這一切,是如何實現的?空間計算技術發揮了至關重要的作用,這是一個融合了計算機科學、數學、地理信息科學等多學科領域的概念。在虛擬現實和增強現實技術中,空間計算能夠實時感知和理解用戶在真實空間中的位置和動作,並將虛擬對象準確地疊加到現實世界中,不僅讓遊戲場景更加真實,而且讓玩家獲得身臨其境的體驗。

近日,《IT時報》記者在視辰信息科技(上海)有限公司(以下簡稱「視+AR」)也感受了一場「真人CS」,捲入到一場跨越虛擬與現實邊界的激戰中。這場引人入勝的體驗背後,是視+AR元宇宙空間計算平台EasyAR Mega的技術支持。

在虛擬中「看到現實」

不同於傳統XR項目對固定封閉場地和複雜裝備(如體感背心)的依賴,在浦東軟件園商舖群的空地處,僅需一台電腦和一個頭顯裝置,科技就能將日常空間轉化為戰場,開啟一段全新的冒險。

花幾秒鍾帶上頭顯設備,眼前的景象開始變換。周圍依舊是熟悉的環境,但轉眼間,各種掩體、旗幟和雕塑如魔法般憑空出現,刹那間,自己被猛然拽入一場橫亙於虛擬與現實交織邊緣的激烈戰鬥之中。

選擇好隊伍後,酷炫的武器出現在眼前:從近身搏鬥用的刀劍到衝鋒步槍再到遠程狙擊槍,面對從四面八方湧來的敵人,玩家可以像動作片主角一樣,揮舞大刀衝鋒陷陣,或是在掩體後冷靜瞄準射擊,享受勝利的快感。

隨著敵人漸增,《IT時報》記者在掩體後騰挪閃避,甚至衝出了室內空間。來到室外後,視野卻意外的開闊,場景佈置也更加豐富:一輛老爺車橫亙眼前,五彩繽紛的氣球懸浮空中,為這「戰場」增添了一抹奇幻色彩。

更為驚喜的是,在這場遊戲中,虛擬與現實無縫交融,即便身處虛擬戰場,周圍的現實世界依舊清晰可見。行人匆匆走過,街景一覽無餘,這使得整個體驗更加真實而不失趣味。在享受激烈對抗的同時,玩家依舊能夠注意到現實世界中的情況,過往行人和周邊環境盡收眼底。同伴加入戰鬥後,既能與自己聯手擊敗AI敵人,也能化身對手,來一場緊張刺激的對決。

在虛擬中「看到現實」

近年來,隨著人工智能算法持續迭代,算力飛速提升。視+AR的EasyAR Mega元宇宙空間計算平台通過多傳感器融合位姿計算、高精度大規模三維重建及多源融合的視覺定位技術,實現了城市級空間計算能力,並結合MR(混合現實)眼鏡,帶來城市級大場景的沉浸式體驗。

據《IT時報》記者瞭解,EasyAR Mega是目前國內使用範圍最廣最大的空間計算平台,擁有全球20萬個開發者,其中有40%來自海外,包括歐洲、北美、東南亞等。

LBE(Location-Based Entertainment),即基於位置的娛樂形式,是近年大空間VR的一大亮點。典型的LBE體驗通常發生在線下幾百至一千平方米的空間內,用戶戴上MR眼鏡,通過牆上貼滿的視覺特徵標記,即可沉浸在如《消失的法老》或《唐宮夜宴》等知名IP構建的虛擬世界中。在視+AR聯合創始人兼CEO張小軍看來,傳統LBE雖然發展迅速,但也面臨行業瓶頸,亟須創新形態推動進一步發展。

《IT時報》記者所體驗的「真人csgo」,就屬於視+AR提出的MRLBE新概念。與傳統LBE封閉式運營模式不同,MRLBE基於共享空間進行部署,例如商場中庭、城市廣場、公園等公共區域,通過EasyAR Mega平台的空間計算定位技術,搭配支持透視的MR設備,MRLBE實現了更高自由度的多場景適配,打破了傳統模式的空間限制。

作為MRLBE的首批落地案例,視+AR星界之門已在上海環球港運營一年。儘管其門店面積僅有一家咖啡館大小,卻覆蓋了整個廣場的運營區域。這一模式極大提升了運營效率,坪效比達到傳統模式的100倍以上。

與傳統依賴於視覺特徵標記(如特定圖案貼紙)的LBE不同,視+AR通過環境數據採集與AI算法訓練,提取自然資源中的特徵,徹底擺脫了對空間改造的依賴。

視+AR聯合創始人、副總裁塗意告訴《IT時報》記者,2015年,視+AR推出了國內首個AR軟件開發工具,核心技術是基於圖像特徵提取。當時技術還只能實現對平面圖像的跟蹤,比如卡片或海報,這些技術支撐了許多早期的AR應用,比如AR卡片和AR塗塗樂。

相比於早期的單一平面跟蹤技術,如今AR技術的應用場景和適應性得到了極大提升。「我們現在做的是讓技術能夠直接融入現實場景,不需要對環境進行改造。」塗意表示,「這代表著底層邏輯的一個重大變化。」

自去年起,包括Pico和蘋果在內的廠商紛紛推出了帶攝像頭的頭顯設備,讓更多人意識到「看到現實」的重要性。「‘看到現實’能解決許多實際問題,比如辦公場景。」塗意舉例說,「使用帶有自然特徵定位的AR設備,可以讓用戶在虛擬與現實之間切換自如。比如你在虛擬環境中辦公,可以喝水、記筆記,甚至收發短信,不會因為佩戴設備而被現實環境‘隔離’,娛樂感和代入感很強,打開了全新的市場局面。

商場尋路不迷茫

AR和MR的應用場景遠不止娛樂領域。在塗意看來,通過改造硬件設備,還能將這項技術應用於體育訓練。例如,可以將傳感器裝在乒乓球拍上,記錄專業運動員的動作軌跡,然後讓孩子在練習時與專業軌跡進行對比,從而實現動作矯正。

《IT時報》記者現場還體驗了基於EasyAR Mega開發的另一款應用——VR導航,選擇目的地後,一個可愛的熊貓形象出現在屏幕上,領著用戶穿過商場複雜的路徑,直達目標。

「AR導航應用更偏向物業級場景,比如在商舖眾多的商場,顧客可能很難找到具體門店。通過AR導航,可以引導顧客從商場入口精準找到目標地點,這是一種便捷的入門級AR體驗。」塗意說。

相比傳統藍牙導航,AR導航有顯著優勢。商場等室內的藍牙導航依賴於大量硬件,不僅鋪設成本高,而且維護複雜。藍牙設備通常2-3年就會開始掉電,導致導航頻繁失效,維護成本居高不下。而基於視覺特徵的AR導航沒有這種障礙,僅需一次環境採集,即可長期穩定運行。

目前,AR導航已經在多個複雜場景中實際應用,最典型的便是大型商場和醫院。以仁濟醫院為例,用戶在支付寶小程序中搜索仁濟醫院導航後,可以快速找到目標科室,系統與支付寶掛號和收費功能無縫銜接,帶來順暢的就醫體驗。

這種基於視覺特徵的導航技術,不僅對複雜環境適應性強,還解決了傳統導航依賴藍牙硬件的諸多痛點。「視覺導航對光線的變化有更高的容錯性,無論是白天、夜晚還是光線角度變化,都能快速適應並保持高精度。」

視覺導航的核心挑戰在於環境的動態變化,如光影變化或場景改動。對此,視+AR利用EasyAR Mega,大幅提升了技術的魯棒性和環境適配能力。

2023年,豫園以傳統神話《山海經》為藍本,打造了一場融合AR互動的元宇宙燈會。這場活動吸引了近百萬線下遊客,線上AR慢直播觀看量更是突破1.4億,成為虛擬現實與傳統文化融合的經典案例;在2023年世界人工智能大會上,視+AR展示的元宇宙地標打卡2.0引發關注,通過EasyAR Mega平台,陸家嘴、武康大樓等實現了AR「變裝」。用戶只需打開小程序或使用誌願者設備,就能在虛擬世界中探索這些地標的奇幻轉變。

從大眾娛樂到體育訓練、文化旅遊,從公共導航到智慧城市建設,AR和MR應用場景的邊界仍在不斷擴展,或將成為智慧城市的重要一環。

排版/  季嘉穎   

圖片/  採訪對象  IT時報