2024年的VR/AR行业新硬件发布情况有所回暖,主要是在苹果Vision Pro带动下,新增了混合现实(MR)设备品类,以及受Ray-Ban Meta催生的AI眼镜。
所谓VST,它的全称为Video See Through。就是真实世界是通过相机捕捉到实时视图,然后与计算机图像技术结合在一起,呈现在不透明的显示器上。使用视频透视,算法可以完全控制视觉集成,允许虚拟和真实物体之间的完全遮挡,甚至可以对真㊣实物体进行更高级别的修改。
通俗讲企业战略思维导图,就是人戴上头显设备,如果能够通过机器的摄像头看到外面的真实情况,那么这台设备就是支持VST,可称之为MR头显。反之,则是VR头显。
从行业趋势✅来说,VST是VR产品的升级,同时支持VR和MR模式的混合现实头显在今后将会是行业标配。
(补充说明:苹果Vision Pro虽然是2024年发售,但首次发布是在2023年,所以没有加入统计。而GOOVIS Art定位是航拍头显,外观造型属于既非VR□□□、也非AR,所以也未列入。)
上述头显大多数采用Fast LCD屏幕或者Micro OLED屏幕,搭载高通骁龙XR2系列芯片,仅少部分例外。
小派科技在2024年4月发布的Crystal Super□□□□、Crystal Light,均搭载PCVR定制芯片。此外,Crystal Super还允许用户根据自己的需求,自由地在QLED和OLED面板之间进行选择其中QLED面板搭配可更换的玻璃非球面透镜,而micro-OLED则采用了小派科技自研的世界首款Pancake玻璃透镜。
Quest 3S采用LCD显示屏和菲涅尔透镜,支持3档瞳距调节,单眼分辨率为1832×1920像素,搭载✅高通骁龙XR2 Gen2芯片,辅以8GB内存,搭配Touch Plus控制器,机身包含一个切换虚拟现实和混合现实视图的动作按钮,支持双频Wi-Fi□□□□、Wi-Fi 6E和蓝牙连接,内置4324毫安时电池。
值得一提的㊣是,Quest 3S没有配备3.5mm耳机㊣接口,用户需要购买Type-C接口的耳机才行。Quest 3S头显正面配备了独特的三角形摄像头/传感器布局,包括两个400万像素RGB穿透式摄像头□□□□、四个红外跟踪摄像头和两个红外照明传感器。
功能方面,Quest 3S支持RGB passthrough功能□□□、支持多种输入方式,包括手势识别和触摸操作。Quest 3S保留了Quest 3的大部分核心功能,如混合现实(MR)功能□□□、电容式触摸以及通过场景识别技术实现自动空间识别和身体追踪,能够在虚拟现实(VR)和增强现实(AR)之间无缝切换,提供多模态交互体验。
Meta采用该策略主要是提前嗅到了潜在威胁,并希望用老用户来继续巩固其在VR领域的基本盘。智能手机巨头三星联手谷歌□□□、高通,预计2025年发布VR/MR头显(或还包含智能眼镜)。若三星头显能取得成功,或会吸引更多智能手机厂商紧随入局,届时市场将会十分拥挤。
PICO 4 Ultra搭载了全新高通骁龙®XR2 Gen 2计算平台,支持双目4320*2160高分辨率,原生1920*1920渲染分辨率。配备4颗环境追踪摄像头用于SLAM空间定位,还有2颗彩色摄像头和1颗iToF深度感知摄像头用于环境感知。配备一整套自研的环境感知算法后,PICO 4 Ultra能够在周围进行厘米级的扫描。
其外观设计保留了PICO 4经典的前后平衡设计,前端主体重量✅为304g,后侧整体重量为276g,整机重量在580克左右。
搭配无环6Dof手柄,采用光学+视觉多模态的跟踪算法,可随时跟踪手指的姿态,保证跟踪效果。另外,手柄的宽频线性马达得以保留,用户依旧可以享受到细腻的振动反馈。
作为国内头显市场领头羊,PICO新发布的这款头显售价4299元,选择瞄准中高端用户,与Meta策略正相反。其背后原因也是因为国内市场情况与国际大有不同。
Ray-Ban Meta眼镜的成功吸引了大批智㊣能手机厂商□□□□、传统眼镜厂商□□、AR眼镜厂商入局这条赛道。
补充说明:雷鸟X2 Lite最早是在2023年10月发布,网传后来改名为雷鸟X3,所以没有列入2024年发布的产品。
据不完全统计,2024年已发布23款AR眼镜产品,平均每个月将近有两款AR眼镜产品发布,且价格□□□□、配置差异巨大。传统AR品牌是国内新品发布的主力,而国内厂商则是推动全球AR市场发展的主力。
作为Meta✅内部十年研发□□、投资数十亿美元的成果,Meta Orion 不仅承载着马克·扎克伯格对未来计算平台的美好愿景,还肩负起了与苹果“掰手腕”的重任。
Orion外观㊣类似普通眼镜,FOV为70°,使用碳化硅透镜和MicroLED投影仪方案,将负责算力的部分放到了类似于AR主机的设备上,使得其自身的重量得到了很好的控制,官方称其重量不到100g,续航可达2小时。
AI方面集成了Meta的Llama 3.2多模态大模型,Orion能够掌握用户通过眼镜看到的内容,并提供个性化的建议和协助操作VRAR。此外,用户在随身携带EMG(肌电图)手环的情况下,可以实现✅眼动追踪□□、手势追踪等多种交互方式。
目前的原型机成本高达1万美元,并且现阶段的Orion 眼镜仅用作演示和内部开发套件,大约仅生产1000副,并不对外正式开售。
据 Meta CTO 安德鲁·博斯沃思透露,Orion的消费者版本预计在2030年之前上市,价格将降至约1500美元。
Rokid Glasses是一款AR+AI智能眼镜。外观也是类似普通眼镜,颜值极高,戴起来不会尴尬(好看必然是未来智能眼镜产品的核心关键之一)。这款眼镜搭载高通骁龙AR1芯片,辅以2GB+32GB的存储组合,采用Micro LED +玻璃衍射光波导的方案,搭载双目单绿色光㊣机□□、2颗超线性定向高保真扬声器□□□、定向拾音阵列mi㊣c□□、1200万像素摄像头□□□□、九轴imu,FOV为30°,支持5V/1A充电,入眼亮度为1000nit。
集✅成多模态AI大模型,支持识物□□□、拍照答题□□、多语言翻译□□、实时导航□□、AI转译(声音转文字)□□□、AI闪记(语音备忘录),支持手机app导入文本提词。大电池配合眼镜充电盒可重度使用4小时。
INMO AIR3是全球首款实现1080P分辨率的一体式AR眼镜,搭载高通骁龙空间计算协作处理器,采用索尼0.44英寸MicroOLED屏幕,角分辨率更是达1080P。
光学显示方面,采用了影目科技自研的“IMAR光学引擎”,并沿用了阵列光波导技术,将复杂的光学系统集成到了单片镜片中。不仅解决了传统BB光学成像方式遮挡用户视线的问题,还提供了无阻碍的自然AR体验,同时保障了用户隐私安全,让日常使用更舒适□□□、便捷。
交互体验方面,搭载 IMOS 3.0 操作系统,支持空间交互与多屏显示。同时,通过全新设计的空间交互戒指,用户可以自然地操控应用,无需肢体大幅动作。
XREAL Air 2 Ultra是一款6Dof全功能AR眼镜,主要面向开发者,是目前业界唯㊣一通过双环境感知传感器(SLAM Camera)来实现空间计算的AR设备。相比苹果Vision Pro在价格方面更具优势,降低了开发者进入空间计算的门槛。除6DoF外,XREAL基于Unity构建的NRSDK进一步强化了手部追踪和手势识别功能,具备平面检测□□、图像识别□□、深度网格□□□□、空间锚点等几大核✅心能力。XREAL Air 2 Ultra首发价为3999元。
AI眼镜从功能与形态上,与普通眼镜相似,拥有识物□□□、翻译等功能;与AR眼镜相比,缺少显示模块。本质上,AI眼镜是介于传统眼镜与AR眼镜之间的中间形态。
补充说明:雷鸟V3□□□、致敬未知AI眼镜均有发出新品预告,但实际产品在2024年并未发布,所以不在列表内;华为智能眼镜 2为2023年发布的产品,2024年推出的仅为新款式,所以不在列表内。
2024年新发布的AI眼镜大致可以分为两类:带有摄像头,通常是第四季度发布,2025年发售,如小度AI眼镜;另一类是不带摄像头,发布时间比较早,现已开售很久,如李未可的Meta Lens Chat。
2024 年,XR 领域的配件市场也迎来了众多创新且实用的新品。VRAR星球从功能性和创新性两个维度出发,精心挑选了一系列具有代表性的产品,以供广大 XR 爱好者参考。
这款体感衣内置的92个触感单元,实现了胸部□□□□、腹部□□□、背部□□□□、肩部大范围的触感覆盖,同时触感单元的点位排布满足“2PD—触觉两✅点阈”理论,确保触感流畅无间断。每个触感单元都采用创新自研的Z轴线性振动马达,定位精准且可单独程控。
沉浸感提升是VR等元宇宙产业重要的发展方向,而体感㊣衣通过触觉实现了沉浸赋能。从感官艺术的㊣角度来看,体感衣极大地扩展了感官艺术的边界,将触觉纳入虚拟✅体验之中,使得虚拟世界的感觉更加以假乱真。从互动叙事的角度来看,体感衣让体验者更有参与感和互动感,更能投入真情实感。
除了在游戏行业的应用外,和而泰感知计划体感衣在元宇宙其他诸多领域也将有广阔的发展空间,包括政务□□、工业□□□、历史□□□、游戏□□、社交□□□、教育□□、艺术□□□、医疗□□□、旅游□□□□、商业□□、娱乐等。
URSA Cine Immersive 是一款「双镜头」摄影机。为了拍摄「Apple Immersive Video」,其具有包含两个 180 度立体镜头的固定定制镜头系统,专为摄影机中的大画幅图像传感器而设计。
为了满足苹果 Vision Pro 用户的出行需求,知名配件品牌 Belkin(贝尔金)推出了一款专为 Apple Vision Pro 设计的旅行收纳袋,售价定为 798 元。
这款小巧多用的 Belkin 旅行收纳袋,以其精致的设计和实用的功能,赢得了不少用户的关注。官方介绍称,该收纳袋能够安全□□□□、有序地收纳苹果 Vision Pro 及其各种配件,方便用户在外出时轻松携带。为了提供更好的保护,该收纳袋还配备了镜头保护衬垫。这一设计能够确保苹果 Vision Pro 的镜头在收纳过程中不会受到划伤或撞击。当镜头防护衬垫不使用时,还可以通过磁力吸附在收纳袋的背垫上,方便用户随时取用。
罗技推出了一款名为MX Ink的手写笔,号称是世界上首款专为Quest头显设计的手写笔配件。它支持Quest 2/3/Pro,售价130美元。目前,这款手写笔已支持Adobe Substance□□□、Gesture VR□□、Painting VR等20余款软件,未来还有望支持VRChat等社交游戏。
PICO体感追踪器重27克,续航时间约25 小时,售价为399元。支持PICO 4 Ultra/4 Pro/4/Neo3使用(非中国市场不兼容PICO Neo3),已适配国内超过20款应用。用户可通过PICO互联App,串流游玩PC VR部分体感游戏。
Omni One 是一款面㊣向消费者的万向跑步机,可让用户在 VR 中行走□□□、跑步□□□□、跳跃和蹲起。根据 Virtuix 的说法,这款具有未来感的设备可以轻松安装在家中的多个位置,并折叠起来方便存放,在不牺牲空间的情况下提供更加身临其境的 VR 体验。
这款由 Senseglove 公司发布的 Senseglove Nova 2 触觉反馈手套,号称是“世界上首款支持手掌反馈的无线 VR 触觉手套单元(手套 + 传感器) ”,这款手套允许用户“抓握”虚拟物体,提供三种可选尺寸,售 5999 美元。
据介绍,这款手套内置震动反馈,允许用户“触摸”感知虚拟的纹理,同时支持虚拟物件主动接触反馈,号称能够提供来自外界的碰撞感,同时搭载力反馈技术。可用于模拟虚拟物件的尺寸和硬度。
Inseye Lumi使用了红外发射器和6个光电传感器的组合,它们可以测量眼睛反射的光强度,并通过AI去分析判断瞳孔的位置。相比Inseye的方案,大部分支持眼动追踪的头显都采用摄像头捕捉光线,比如苹果Vision Pro就是拿红外摄像头和LED组合实现眼动追踪的。Ins㊣eye表示,他们的方案比起摄像头方案有几个优点:明显的低功耗,可达1000H㊣z的高刷新率,以及低于1毫秒的延迟。这些优点让它能提供更好的注视点渲染体验,从而减少PCVR中的GPU负载。另外,Inseye也表示他㊣们会支持VRChat集成。
简单来说,HoloTile Floor 由数百块银元大小的圆形小瓷砖组成。它们可以实时倾斜和旋转,每个都能充当一种迷你全向跑步机。地板✅可以感应用户的脚步和方向,并相应地调整圆盘,让使用者保持在平台的中心。这样,VR 装具使用者就可以在探索虚拟环境时原地行走,而不会撞到现实世界中的墙壁或家具。
迪士尼表示,Holotile Floor 可以为 VR 应用开辟新的可能性,例如游戏□□、教育□□□、甚至㊣旅游等。它还可以让 VR 用户在虚拟空间中移动时感觉更加自然,而不是只能脑补。
2024年7月10日,三星发布了其首款智能戒指Galaxy Ring,国行售价3099元。功能方面,Galaxy Ring电池续航长达七天,可追踪记录睡眠期间数据□□、提供改善睡眠建议,可监测用户经期□□、心率和㊣锻炼,可接听三星手机电话及遥控手机拍照。
Galaxy Ring最㊣引人㊣注目的功能之一是其可以追踪打鼾和呼吸模式,并结合三星健康App提供详细的睡眠质量 分析。虽然追踪打鼾并非Galaxy Ring的独家功能,但集成✅在如此小巧的智能戒指中,无疑为用㊣户提供了更多的便利。
Freeaim Technologies 研发的VR鞋是一种类似VR万向跑步机的辅助外设。该设备具备灵活的移动能力,支持向前行走(或慢跑)□□、原地转身或者左右横跨一到两步,未来版本的鞋子还将支持后退步行及无限侧移。
与传统的VR跑步机相比,Freeaim VR鞋无需安全带或栏杆支撑,减少了使用时的束缚感,更加轻巧□□□、舒适□□、紧凑。