眼镜显示器（自制智能眼镜）

　　眼镜显示器（自制智能眼镜）
　　未来，VR头显和AR眼镜将融为一体，并以轻巧、便携和高效的形态被人们应用在生活中的各处。2021年，VR产业发展明显升温，但这似乎距离前面描述的目标还有很长的路要走。
　　就在上周，陀螺君从B站某UP主那学到了一个实现类似效果的半吊子玩法。其实就是基于Oculus Quest头显的边界系统Guardian功能，在开启透视的同时显示VR界面并调整到合适的透明度玩VR游戏。
　　Quest开Guardian功能实现伪MR视效（图源：B站）
　　这种黑白透视的新奇体验，令陀螺君不禁联想到：如果真有一款结合了AR眼镜的增强现实显示效果和VR头显的6DoF强交互玩法的产品，那它的体验究竟如何呢？
　　实际上，还真有一款叫＂鸿鹄＂的MR眼镜与这一想法不谋而合。恰好，陀螺君也在这周收到了这款产品制造商影创科技寄来的快递。就这样，陀螺君抱着上面的疑惑开启了这次的体验之旅。
　　售价2W块
　　一款硬实力在线的MR眼镜
　　图源：VR陀螺
　　鸿鹄，由影创科技和英国PhotonLens联合设计，是首批搭载高通骁龙XR2平台的混合现实设备之一，其主体分为主机、可拆卸6DoF体感手柄和MR眼镜三个部分，眼镜和主机之间则通过Type-C数据线连接。
　　从外观来看，＂鸿鹄＂给人的第一印象更像是一个缩小版的Switch掌机。但所谓麻雀虽小五脏俱全，＂鸿鹄＂ 的一副蓝牙手柄采用磁吸式链接，可以实现供电、游玩两不误。手柄内部还内置了两个6DoF＂天线＂，可供轻度交互时使用。
　　可拆卸+蓝牙手柄+便携式6DoF演示（图源：影创）
　　XR2平台是高通针对XR设备，新推出的7nm工艺制程扩展现实平台。其原生支持5G网络传输，CPU采用8核处理器、最高主频可达2.84GHz，GPU采用Adreno 650 图形处理器搭建。据悉，XR2的CPU和GPU 性能比上一代提升了2 倍、视频带宽提升4 倍、分辨率提升6 倍、AI 性能提升了11 倍。
　　交互方面，XR2定制化的计算机视觉处理器确保交互过程中的精准高效，且可支持最多7路并行摄像头下高精度实时追踪用户头部、嘴唇和眼球，支持26点手部骨骼追踪。计算机视觉则可高效进行场景理解和3D重建。
　　这些所有底层功能，为＂鸿鹄＂的后期流畅体验带来保障。而也的确如上所述，＂鸿鹄＂这款MR眼镜独特的地方，在于将目前流行的VR一体机交互方案无缝移植到了增强现实终端上。
　　图源：VR陀螺
　　其CV方案头手双6DoF追踪功能，基于影创自研的SLAM空间定位算法。
　　得益于XR2芯片和影创自研算法加持，＂鸿鹄＂MR眼镜实现了虚拟物体与真实环境相对位置的持久化的功能。无论何种意外情况发生，虚拟物体在真实世界中的位置都是固定不变的。同时，手柄上还集成了隐藏式追踪灯环，可有效弥补强光环境下CV方案的短板，实现稳定追踪。
　　SLAM定位遮挡测试（图源：影创）
　　就实际体验感受来说，＂鸿鹄＂MR眼镜的追踪方案与Quest相差无异。据影创科技透露，摄像机的拍摄速度是60Hz，每帧间隔16.6ms，视频里每一帧的延迟都低于16.6ms。这种情况下依旧保持较高效的虚实叠加呈现，表明整个系统的延迟都在1帧以内。
　　图源：影创
　　除了主机和MR眼镜部分，＂鸿鹄＂的配件也相当丰富。通过连接在主机背面的圆型磁吸支架，用户可以随意加载5G模块或者外接充电宝供电。＂鸿鹄＂还配备了一个可拆卸的肩键设计。用户可以根据需要选择是否使用，这在保障完整手柄体验的同时，实现了便携。
　　图源：影创
　　此外，＂鸿鹄＂还配备了全自由度自然手势追踪系统，这块在后面的系统实测环节中会讲到。
　　系统、操作趋于＂科幻＂
　　真实版赛博朋克来了
　　实际上，这并非是陀螺君第一次体验＂鸿鹄＂。
　　今年一月初体验时，这款MR眼镜给我的最大震撼，来源于它将6DoF交互和混合现实相融合的新奇想法。但系统层面，尽管当时是内置安卓10以及Blue Cat 2.0双系统，但体验感受上仍处在初级状态。
　　正所谓一日不见如隔三秋，这次再体验＂鸿鹄＂，竟有种时空穿越的感觉。
　　镜框两侧为两颗CV摄像头，镜片外侧为两颗红外感应器，中心为一颗800万像素摄像头（图源：VR陀螺）
　　操作系统
　　MR眼镜的系统操作体验，通常由视觉通透性、色彩对比度和交互三方面决定。说到这，相信大部分人都会首先想起于2019年底发售的，赫赫有名的微软HoloLens 2。
　　＂鸿鹄＂MR眼镜中，可以看到一些借鉴的影子。首先，该设备也和HoloLens 2一样支持全自由度自然手势追踪，这意味着用户只需要正常的通过抓、握、拽等常见动作就可以实现系统交互。
　　图源：影创
　　操作界面的可视化，＂鸿鹄＂采用了更加靠近安卓电视桌面的排布方式。上手后不会像HoloLens 2那种手腕呼出界面一样令人感到陌生。几秒内，用户就可以用手拖动界面对应的位置滑动图标并选择应用。
　　值得一提的是，手势模型到控制界面之间，有一条＂磁力线＂作为链接。这使得用户不用像HoloLens 2中一样非得走到面前去戳对应的位置，而是可以与虚拟窗口保持一定距离实现流畅操作。
　　缩放操作演示（图源：影创）
　　以页面窗口为例，用户可以通过将＂磁力线＂吸附在边框上进行翻转。配合比较直观的过渡动画效果，可以给人一种自然、高流畅度操控感受。
　　绘画应用
　　回到6DoF交互上，基于手柄＂鸿鹄＂可以准确追踪用户手臂更多自由度的活动。为了更好地展现其在MR眼镜上的表现，＂鸿鹄＂内置了一款类似MR版本《Tilt Brush》的绘画应用。
　　图源：影创
　　在实际体验过程中，悬空的画板和真实环境背景形成透视关系，更像是在现实生活中的一张透明亚克力板。同样的，作画过程中笔触的力道、轨迹都模拟的非常真实。值得一提的是，因为＂鸿鹄＂使用的是BB光学方案，其对比度、透光性和色彩控制都要比波导类更好，此外相较VR头显又少了分辨率问题的困扰，在这样的场景下的绘画体验十分新奇，可谓是极具科幻感。
　　图源：影创
　　绘画过程中，手柄与笔触做到无缝衔接。在这里，可以全面呈现出＂鸿鹄＂6DoF手柄在无延迟三维空间追踪效果的出色表现。
　　在虚拟鸿鹄的创作过程中，手柄与SLAM算法相融合，实时感知现实空间的三维信息，XR2处理器做出机器视觉信息运算，再将虚拟画面与手柄轨迹一一对应，这样的闭环计算几乎感知不到延迟，更是靠肉眼无法察觉的。
　　影音娱乐
　　6DoF交互+SLAM呈现，为一些成熟的游戏作品移植打好了坚实的基础。比如，在MR环境中体验《Beat Saber》，需要的是超低延迟和长时间高频运动下稳定的虚拟环境定位。可以说，此次体验里＂鸿鹄＂都做到了。
　　此外，＂鸿鹄＂的安卓10系统自然可以原生支持安卓游戏在其上流畅运行。陀螺君在MR眼镜上尝试了王者荣耀和网页浏览。面对全息大屏打游戏、追剧，并且还有种飘浮在半空中若隐若现的感觉，这种游戏体验像极了各类赛博朋克电影中的经典场景。
　　图源：影创
　　最重要的是，相较于仅仅作为外接显示器的传统手机+AR分体式眼镜设备，＂鸿鹄＂自带的手柄可以蓝牙适配大部分游戏内容，遥感+按键操作的舒适度远超盲搓手机。
　　＂鸿鹄＂背后
　　承载着影创怎样的大志？
　　＂鸿鹄＂的背后，是CV方案6DoF交互、XR2芯片组、手势识别等技术趋于成熟的写照；VR产业从Cardboard到Quest，AR产业从15°FOV棱镜到45°FOV BB光学......这些底层技术不再被高高挂起，各大厂商结合自有特色研发出新产品，并开启探索走向商用化和普及化的征程。
　　Quest VR游戏生态正在海外市场掀起一场热潮。 其成熟生态的背后，离不开技术硬实力的支撑。而影创作为国内MR硬件厂商，凭借自研将6DoF等技术成功赋能到MR眼镜上，这证明国内内容生态起势前的技术储备阶段已经颇见成效。
　　便携性大幅提升（图源：影创）
　　至于国内MR游戏未来是否会像VR游戏一样火爆，现阶段不好妄下结论。但是，＂鸿鹄＂给了国内VR、AR游戏开发者更多可能性，无论是旧游戏移植还是新游戏创作，对于急待发展优质内容和良性营收闭环的中国VR/AR游戏生态来说都是好事。
　　总结
　　上次体验时，影创工作人员告诉陀螺君，他们正在以一天N次迭代的高强度工作方式来优化＂鸿鹄＂操作系统、可视化界面和人机交互的体验成熟度。今天，＂鸿鹄＂算是交上了一份满意的答卷。
　　＂鸿鹄＂MR眼镜原价是20000元，预售定金是5000元。目前＂鸿鹄＂MR眼镜已经开启预售通道，影创科技还推出了＂趣味问答免尾款＂（限量198台，目前已售罄）、＂体验反馈赢免单＂和＂2021 Qualcomm XR 创新应用挑战赛赢奖品＂活动。
　　如果参加＂体验反馈赢免单＂和＂2021 Qualcomm XR 创新应用挑战赛赢奖品＂活动，将有机会获得影创科技免费赠送的＂鸿鹄＂MR眼镜。
　　无论是从技术、算法层面看，还是创新能力和想象力上看，国内以影创为代表的一众厂商正在MR这条道路上扩宽探索半径。随着海外消费级市场的崛起，成熟商业化技术模式的形成，国内将依托独有的产业链优势助推国内厂商一路向前，以更好的体验、更加低廉的成本后发抢占国际市场。