4299元!字節首款MR頭顯來了,巨幕打遊戲,同屏刷抖音,兼容蘋果Vision Pro
價格只有蘋果Vision Pro的1/7。
作者 | ZeR0
編輯 | 漠影
智東西8月20日報導,今日,字節跳動旗下PICO推出首款混合現實(MR)一體機PICO 4 Ultra。
12GB+256GB消費級售價4299元,今日開啟預訂,9月2日10點正式開售。
兩個全新PICO體感追蹤器,售價399元。
老用戶以舊換新,全套最低只要2679元!
比起256GB存儲容量、售價29999萬元的蘋果Vision Pro國行版,這個價格過於良心。
面向已購機用戶,PICO推出首個XR行業以舊換新活動,用戶最高可獲得300元現金補貼。
企業版頭顯售價7499元起,9月3日開售,為醫療、教育、LBE娛樂等領域量身定製。
PICO 4 Ultra採用高通第二代驍龍XR2芯片、12GB內存、雙目3200萬像素彩色透視攝像頭、雙目4K+超視感屏,支持Wi-Fi 7,搭配全新無環手柄,支持手柄、手勢、鍵鼠交互操作,還引入了行業首個生成式AI虛擬場景。
這款全新頭顯設備不僅能互聯電腦,支持同時打開20個應用窗口,窗口最大尺寸達280英吋,而且首次實現手機投屏操作,可以一邊大屏打遊戲,一邊同時打開B站、抖音、小紅書等App。
而且PICO 4 Ultra能播放用蘋果iPhone或Vision Pro拍攝的空間影片,編輯也很方便,還支持一鍵上傳到抖音。抖音2D轉3D影片功能將在晚些時候上線。
此外,PICO公佈了一部MR互動劇《達芬奇:狂想之翼》,並現場展示了《三體:遠征》VR遊戲畫面。
企業版PICO 4 Ultra除了在性能顯示和交互方面有很大提升外,還提供各種企業解決方案。硬件層面有多種產品,軟件層面有一站式工具平台、客製化操作系統、企業套件,可以幫助企業客戶打造定製化大空間解決方案,並向合作夥伴提供全週期支持。
01.
硬件設計:定製精密傳感器,
雙目4K+超視感屏,渲染解像度提升62%
據PICO OS產品負責人馬傑思分享,PICO 4 Ultra採用全新硬件設計,專門新增了為MR打造的3類精密傳感器,包括4顆環境追蹤攝像頭、雙目3200萬像素彩色透視攝像頭、1顆iToF深度感知攝像頭。
PICO 4 Ultra彩色透視模式下,畫質為800萬像素,由3200萬像素攝像頭獲取的初始畫面四合一而成,是其他家產品的兩倍,還實現了攝像頭幀率和屏幕幀率的對齊,避免了畫面撕裂問題,馬傑思說這是其他家服務產品所沒有的。
PICO研發團隊很大程度上解決了透視畸變和扭曲問題,現場播放的影片顯示整體畫面非常穩定。
PICO 4 Ultra有一個iToF深度感知攝像頭,最遠測量範圍達3米,最大測量角度60°,深度精度達釐米級。
在此基礎上,PICO自研了一整套環境感知算法,包含實時創建3D地圖、環境語義理解、長期記憶虛擬物體固定位置等功能。
PICO SDK在技術棧上的支持也比較全面,支持Unity、Unreal、WebXR及OpenXR多種開發方式。
還有一個重磅更新是Spatial ML機器學習框架。開發者可以把自己開發的模型部署到PICO 4 Ultra上,並可同時調用透視攝像頭+端側模型,實現一些有趣的效果。
PICO 4 Ultra整機重量約580克,前端主體重量305克(含泡棉),後側整體重量276克(含頂部綁帶、雙側綁帶、電池倉體、頭墊)。這種符合人體工程學的前後平衡設計,會讓佩戴更加持久舒適。
手柄做了全新無燈環設計,高度約60毫米,比上一代高度降低50%、輕了約15克,重心偏手心位置,手感更舒適,還融合了光學+視覺多模態追蹤算法。
PICO與高通長期深度合作。PICO 4 Ultra搭載高通第二代驍龍XR2平台,GPU性能提升2.5倍、AI性能提升8倍。內容提升到12GB,據馬傑思分享,其他頭部產品內存只有8GB。
芯片升級後,6款遊戲大作有了更多性能空間,畫面表現力大幅提升。
顯示上,該頭顯搭載雙目4K+超視感屏,雙目分辦率為4320 x 2160,每塊屏出廠都會做精準色彩校準,屏幕亮度比PICO 4提升25%,系統預設刷新率也從72Hz提升到90Hz,顯示更加絲滑,同時每一塊屏幕都在出廠時做了色彩校準。
顯示清晰度進步很大,渲染解像度提升到1920 x 1920,比PICO 4提升超過62%。
02.
操作系統:360°全景屏,280英吋巨幕,
可跨端互聯電腦和手機
新版PICO操作系統主要圍繞「更加高效、更多場景」的目標展開,一個重磅更新是全景屏工作台。
以前PICO 4主要被用來玩VR遊戲,全景屏工作台將使用場景進一步擴展,使得用戶在虛擬空間擁有更多像電腦、手機一樣的功能體驗。
在PICO 4 Ultra中打開部分原生應用或手機應用,多個應用窗口可在360°環形區域內擺放排列。
PICO 4 Ultra提供桌面級多窗口體驗,最多可打開20個應用窗口。馬傑思補充說,其他家產品只能打開6個應用窗口。
應用窗口的最大尺寸可達280英吋,合同6.3米 x 3.5米。
PICO 4 Ultra提供了多模態交互選擇,支持手柄、手勢、鍵盤鼠標操作。鍵鼠會在今年Q4更新,效果就像用電腦。
該頭顯全面兼容安卓生態,可以使用多種主流聊天、影片、遊戲等App。
比如用戶可以同時打開B站、抖音、小紅書,B站還是一個巨幕效果。
用戶還可以一邊用巨幕玩手遊,一邊查看遊戲媒體,同時看B站攻略影片。
這種多任務能力搭配上巨大的顯示空間,為使用場景帶來更多的可能性。
同時,PICO 4 Ultra支持沉浸/透視模式一鍵切換。
PICO還更新了沉浸模式下的虛擬場景,以春夏秋冬為主題,製作了4個高精度虛擬場景。
考慮到個性化審美需求,PICO 4 Ultra引入行業首個生成式AI虛擬場景。用戶可通過文字框生成獨特的360度虛擬場景,效果就像照片一樣。
PICO此前已實現Windows/Mac雙兼容的桌面互聯,支持多桌面同時顯示,並支持設定任意解像度比例的虛擬屏幕。
PICO 4 Ultra不僅可以互聯電腦,還能互聯手機,首次支持鏡像顯示和操作手機,而且是對iPhone與安卓手機雙兼容。
遊戲串流方面也有很多升級,支持雙路6K遊戲串流,Wi-Fi 7無線串流傳輸延時低至5ms,有限串流有行業領先的1000Mbps碼率,並推出全新AV1編解碼,可在低端PC顯卡上運行更高的碼率。
空間影片能捕捉到現實世界的深度信息,拍攝出帶有3D立體感的畫面,比傳統影像更能還原現實世界。
馬傑思說,PICO 4 Ultra的各項參數都擁有「行業領先的最高規格」,希望它可以成為「市面上最親民、高品質的空間影片拍攝設備」。
其空間影像功能支持空間影片、空間照片的拍攝和觀看。
PICO 4 Ultra擁有4096×1536的空間影片雙目解像度,首度支持60fps幀率拍攝空間影片。馬傑思說,其他家產品目前只能做到30fps。
該頭顯還率先至支持6DoF,空間音頻錄製功能將於後續OTA推送更新。
值得一提的是,PICO 4 Ultra能播放iPhone和Vision Pro拍攝的空間影片和照片。
用戶可以用iPhone拍攝空間影片,然後通過PICO手機App將拍攝的空間影片和照片導入PICO 4 Ultra相冊,把它相當於一個空間影片記錄中心。
空間影片的編輯也十分方便,有專門的3D空間特效、抖音美顏算法、豐富配樂,還能一鍵發佈到抖音。
PICO影片推出的完整版3D空間特效功能,將於後續OTA推送更新。
03.
PICO應用商店:向所有開發者無門檻開放,
今年下半年逐步完成
PICO應用商店負責人姚帥宣佈,今年更開放的PICO即將到來,PICO進入全新開放生態階段,PICO應用商店的開放將於2024年下半年內逐步完成。
PICO應用商店向所有開發者無門檻開放。只要通過平台測試、符合法規,就能上架。
目前PICO提供超過50款MR應用、超過900款VR應用,覆蓋遊戲、娛樂、音樂、工作生產力等多種場景。
例如玩治癒的《拚圖巡遊》遊戲,自由走動和點選抓握,完成3D拚圖挑戰。
還有經典的《憤怒的小鳥》,在3D遊戲場景中用手勢操控彈弓射擊。
更複雜的沙盤戰略遊戲《Demeo地城奇譚》也能通過MR實現,支持多人聯機。
在MR環境中,《Spatial OPS》等動作遊戲能帶給玩家更加身臨其境的體驗。
姚帥還分享了PICO影片MR之路。只要戴上頭顯設備,用戶就能擁有自己的電影院、球會或多人客廳。
此外,PICO和佳能共同發起空間影片創作者計劃,推動空間影片的內容生態發展。
姚帥宣佈,PICO推出一部MR互動劇《達芬奇:狂想之翼》,展現一場穿越的旅行探險。
除了MR互動外,PICO自研AI技術可將2D影片轉製成具有景深效果的3D空間影片,並通過全景影片流進行分發。
PICO還公佈了三體VR遊戲《三體:遠征》,不過沒透露具體上線日期。
04.
PICO體感追蹤器:「馬卡隆」造型,
重量比雞蛋還輕,續航超過25小時
到One more thing環節,PICO產品經理唐貞展示了PICO體感追蹤器。該追蹤器與PICO頭顯無縫協作,只要將兩個追蹤器佩戴在腳踝上,就能實現全身追蹤。
PICO體感追蹤器擁有「馬卡隆」造型,主體高度約1.52釐米,直徑約3.85釐米,很輕便。
它採用人體工學弧度設計和親膚軟墊,舒適貼合。
追蹤器的主體與底座重量只有27克,比雞蛋還輕;續航長達25小時。如果每天只用1小時,則至少能連續使用3周。
開機即可自動配對,在體感追蹤器App進入校準模式後,佩戴頭顯低頭看向腿部追蹤器,大約5秒就能完成校準。
PICO體感追蹤器與PICO頭顯無縫協作,使用紅外光幫助糾正長時間VR使用期間發生的漂移。
該追蹤器搭載了多模態融合追蹤方案,可實現高精度、低延時的全身動作捕捉。
其底座和主體共分佈12顆紅外傳感器,主題裝有1顆9軸IMU傳感器,追蹤時以200Hz頻率追蹤並傳輸動作數據。
體感追蹤器加上手柄和頭顯,一共可輸出全身24個骨骼節點6DoF數據。
全身動捕模式下,PICO體感追蹤器對身體動作捕捉延時約20毫秒,平均位置誤差5釐米,腳踏動作判定及還原準確度不低於98%。
PICO體感追蹤器已接入VRChat,一體機版本和PC串流版本均可兼容。
有了全身追蹤功能後,用戶可以暢玩XR舞蹈、踢足球、節奏音遊,或者體驗燃脂健身運動。
PICO體感追蹤器共支持超過20款遊戲,覆蓋節奏音樂、運動健身、社交等不同領域。
PICO今年還與英特爾合作舉辦了一場VR運動會。
這個小「馬卡隆」可以被安裝在家裡的任何真實物體上,將真實物體代入虛擬環境。其獨立追蹤模式正式開放適配,開發者及企業用戶可以探索更多新玩法。
05.
結語:國內電商總銷額第一,
應用數量已超900個
PICO總裁周宏偉對PICO的戰績進行了階段性總結:PICO在國內京東和天貓兩大電商平台的總銷售額一直排名第一,PICO 4在21個國家和地區銷售。
PICO企業服務覆蓋全球2600多所學校,為20多萬名學生提供使用VR進行學習的支持,在醫療領域與合作夥伴一起為超過54萬名患者提供輔助治療。
截至目前,PICO應用商店上的應用數量超過900個,長期合作的開發者數量超過500個,覆蓋超過60個國家和地區。
周宏偉相信,新推出的PICO 4 Ultra,會給用戶帶來前所未有的獨特體驗。