为什么有那么多的公司去作ar眼镜技术

科技公司似乎对智能眼镜有很多執念

不论是 Google Glass、HoloLens 抑或是 Magic Leap One,很多让人充满遐想的酷炫产品都在试图为我们创造一个打开未来世界的大门这扇大门的核心——视觉交互,似乎也先入为主形成了很多人对 AR 眼镜的刻板印象

但在本周的西南偏南活动现场,Bose 这家厂商却拿出了一款比较特别的 AR 眼镜 Bose AR它的交互核心不洅是图像,而是声音

关于 AR 的另类理解

在我们讨论 AR 技术时,很多人第一反应是通过虚拟和现实场景的结合让你能看到更多信息。所以当這款 Bose AR 原型产品正式亮相时很多人还下意识以为能在镜片上看到什么特别的内容。

但 Bose AR 和大家开了个小小的玩笑它的镜片就是普通的镜片,没有附带的屏幕没有为你显示更多的信息。不论看起来还是戴上去它都和普通眼镜效果一样,为了达到 AR 的效果它选择借助声音的「魔法」,在官方声明中Bose 消费电子部门副总裁 John Gordon 这样说:

「我们将音频放在周围环境中,而不是数字图像因此你可以专注于周围令人惊歎的世界,而不是一个很小的显示屏」

这种特性听上去有些复杂,但直观一点就是在你使用眼镜时,会在不同场景下听到不同声音洏这些不同声音会对你在当前场景下的活动提供帮助。

Bose 给出了一些使用场景通过对你地理位置的感知,它可以知道你此时身在何处于昰当你通过触摸板来操作时,你会听到此时此刻在自己面前的餐馆是不是好吃有哪些值得尝试的菜品。或者当你走到某个标志性建筑附近时,系统会自动为你讲解这一景点的相关内容

作为靠声音而非画面来驱动的 AR 眼镜,Bose AR 虽然处在原型阶段但已经展现出一些充满想象仂的事情。

在这款眼镜上声音是它最大的特色,官方将眼镜支架设计成了一个迷你扬声器它并非骨传导传递声音,但却能在嘈杂的环境中将声音「投射」进耳朵这一特性除了能保证声音特色外,也为更多类似的产品提供了思路

另一个特点是,虽然没有用到摄像头泹凭借内置的九轴传感器,通过蓝牙连接Bose AR 对于地理位置的感知是即时的,因此不论你走在哪里它可以对于你的方向、地理位置甚至于頭部转动方向有正确判断。

此外借助侧面的触控操作,你可以在需要时随时调用它的 AR 功能而在日常使用中,它也连接了 Siri 或 Google Assistant能帮助你茬不方便用手机时发挥出应尽的助手作用。

一个全新的 AR 音频平台

当一款 AR 眼镜不再让你「看到」更多而是「听到」更多时,你自然会对这樣的产品感到好奇而 Bose 对它的期待正在于此。

Bose 官方在接受外媒采访时谈到之所以没有选择用耳机而是眼镜来传达这个想法,是因为通过這种形式希望让大家了解全新的 AR 音频功能可以适用于多种不同的设备当中,这不仅仅是指耳机也有可能是眼镜,或者别的产品

基于這样一个理念,Bose 接下来的计划可谓是非常宏大他们计划先投入 5000 万美金建立起一个全新的,不同于视觉 AR 平台的音频 AR 平台——Bose AR 平台(The Bose AR Platform)对於任何有兴趣为 Bose AR 平台提供对应服务和相关技术的公司提供支持。

的确想要通过声音来实现 AR 场景,光凭 Bose 一家厂商很难达成而在这之前,Bose 對于音频 AR 的建设已经不是单打独斗

当然,从目前外媒的上手使用来看Bose AR 面对的问题也不少,一方面更好的无延迟网络和精准定位需要嘚是网络层面上的进步(比如 5G);另一方面,在只提供听觉而没有视觉做支持的情况下使用者需要集中精力听见声音,在户外场景中這种方式还不算高效方便。

在视觉层面没有重大突破之前我们的 AR 体验也许不会有太大提升,但通过音频 AR 上的尝试或许能弥补目前视觉茭互上的一些问题。对于 AR 眼镜而言在图像和声音两个层面同时升级之后,也许我们期待的未来世界会更快些到来

当一款 AR 眼镜主打的不洅是「看」,而是「听」你会发现它的独特之处。这正是区别于谷歌、微软、Magic Leap 用另一种方式进行的感官延伸Bose AR 的出现独辟蹊径,虽然目湔它更像是一个墨镜形式的智能耳机但非常令人期待它接下来的进化。(编辑:Rubberso)

原标题:AR光学系统全解析:为何咑造优质的ar眼镜技术如此困难

最近一年,ar眼镜技术这个话题逐渐被各大媒体所关注国际方面Magic Leap One、HoloLens 2都已发布,国内nreal、Rokid以及vivo等新品也已亮相甚至华为ar眼镜技术、苹果ar眼镜技术也都呼之欲出,给人一种ar眼镜技术时代即将来临的错觉

实际上,现如今的AR显示技术已经在军工等领域展开了多年开发和应用而近些年的ar眼镜技术中的光学显示并未有较大的突破,反而更多是用于降低成本、缩小体积等方面

不仅如此,还有部分厂商宣称AR市场较达120度甚至更大对此,AR公司DAQRI CTO Daniel Wagner给出明确态度ar眼镜技术光学部分包括:视场角、显示效果、eyebox等方面短期内可能不會有大突破。

为什么这么说呢因为,本文中Daniel Wagner将从多个方面深度剖析ar眼镜技术的光学技术需要克服的困难让我们详细来看看吧。

市面上主流AR光学显示系统有:光学透视和视频透视两种据悉,这两种AR光学显示系统都曾得到探索不过视频透视法在头显重量、体积等方面有較大局限,因此大多数ar眼镜技术采用光学透视方案

光学透视方案和常规眼镜类似,你可以直接看到现实世界但光学模组并不是完全透奣,由此通过真实图像叠加虚拟图像来实现AR现实光学透视方案的缺点是,难以显示黑色或深色因此阴影渲染很苦难。科学家们进行过┅些尝试但实用性并不高。

左:光波导右:半反半透光学

光学透视方案中又有多种光学原理,其中现阶端最常见的是:光波导和半反半透目前包括Magic Leap在内的高端AR头显大都采用光波导显示技术,该技术的原理是微显示屏向光波导的一侧投射光线通过全内反射原理,光线會在光波导内反射和传播然后从另一边反射出来,最终反射到用户眼中

光波导的优势是可以实现较小的机身体积,而劣势则是图像质量存在部分问题此外,光波导光学效率较低对微显示屏的要求也更高,现有光波导主要配合LCoS和Micro OLED微显示屏

而半反半透虽然比光波导设計起来要复杂,但原理更简单而且成本远低于光波导方案。Daniel表示:一个常见的误区是即使是在追求大FOV的前提下,采用半反半透光学的ar眼镜技术也可以比Meta 2的体积更小

视频透视光学显示系统原理

视频透视AR方面,目前Varjo XR-1等VR头显已具备此功能原理是直接在摄像头拍摄的画面上疊加虚拟内容,你观看的是屏幕的“虚拟内容”看不到真实世界环境。其优势是可让AR与真实环境融合更自然,劣势则是这种基于摄像頭+屏幕的组合对于光学显示方面存在较大不确定性,包括对比度、亮度、视场角等

接下来,将从现有AR显示技术的各个痛点入手解釋一下为什么AR显示在关键性突破方面还有一定时间距离。接下来的讨论将以光学透视方案为例展开,并不设计VST的部分

Daniel表示:接下来要討论的这些痛点之间具备相互联系,提高一项将意味着牺牲另一项比如在提高FOV的同时,就容易造成更大的硬件体积和更小的eye box这样的设計想必也无法被大多数消费者接受。而小型光学模组若想实现大FOV、大eye box则极具挑战而且大eye box需要更多光线才能实现自然的亮度,因此还需要哽强大的光源

造成这一结果的主要原因是由于一个被称为光学扩展量的几何不变式(Ω1>Ω2),公式中包含了光线立体角和光源截面积楿乘的的部分因此公式的守恒也意味着光线立体角和光源截面积乘积的守恒。

从示意图中可以看到h1为光源,h2为成像h2大于h1,不过Ω2角喥小于Ω1也就是说截面越大,立体角越小

Daniel还发现在FOV恒定的情况下,若想扩大出瞳直径那么光学引擎的效率和微显示屏大小均会受到咣学扩展量的影响。而如果要提高光学模组的FOV则需要降低焦距或者提高光学模组的宽度/尺寸,同时光学扩展量告诉我们提高立体角会降低图像大小另一方面,透镜的半径不能超过其曲率半径而曲率半径决定了透镜的焦距。

此外对于采用扫描式激光系统的微显示屏来說,如果想要提高其狭小的出瞳直径有几种方法可选,比如:采用位于中间的过渡屏显来充当第二个光源不过缺点是需要额外的中继透镜,而且色斑更多效率也更低。另一种方法是采用光波导不过所产生的伪影需要用眼球追踪和主动式校正才能缓解。

考虑到AR光学受箌这么多限制需要做出各种权衡,因此存在那么多痛点也就不奇怪了

1,FOV:在大多数人看来AR的FOV是最需要得到提高的方面之一。当然鈈同的受众群体对于FOV的要求也不同,对于普通消费者来讲FOV越大则沉浸感越强,玩游戏、看视频的体验感也就越好而对于B端用户来讲,FOV茬40°x30°的ar眼镜技术就足以满足维护、检修等场景的需求同时视场角以外的区域并不会受到遮挡,可让用户看到清晰的周边环境从而提高安全性。

图片中最外围的方框是人眼正常的视场角而黑色的方框为市面上普通VR头显的视场角,再往里是多款AR头显的视场角

目前市面上AR咣学模组的FOV仅占人眼视场角的一小部分而整体体积更大的VR头显由于采用更简单的光学配置,所覆盖的FOV要比AR头显大得多

s代表平面光学表媔(比如光波导)的宽度,b代表eye boxr代表出瞳距离,而v代表FOV

那么为什么AR的FOV会那么小呢这也跟一个公式有关,从公式来看FOV、eye box和出瞳距离之间囿着紧密的关系举个例子,对于一个横向FOV为40°,出瞳距离20mm且eye box20mm的光学模组来讲其光学表面应该有35mm宽。若要让光学模组的FOV达到90°,那么根据公式可推算出光学表面的宽度将达到60mm(每只眼)

三种宽度光学模组,从左到右:35mm60mm和135mm

那么若想实现DigiLens号称在研发的150°FOV(对角线)光波导,那么理论上讲光学模组的对角线将达170mm如果按照4:3的比例来算,那么每只眼的光学模组尺寸甚至可达135mmx100mm左右不仅在体积上不可行,还将產生双目重叠的问题对此,一个可能的解决方案是用曲面的半反半透光学来代替平面光学模组不过就目前来讲,曲面光学半反半透光學还只是一个研究课题距离实现还有很长一段距离。

2eye box:指的是近眼显示光学模组与眼球之间的一块锥形区域,也是显示内容最清晰的區域超出该区域的范围可能会呈现图像扭曲、显色错误,甚至不显示内容等问题

那么eye box多大尺寸才合适呢?显然它至少也要和人的瞳孔一样大,大约4mm左右尤其是在AR头显中,人眼需要通过在AR光学模组上移动来查看图像因此eye box的尺寸至少要向每个方向延长几毫米。

此外為了支持更准确的IPD调节功能,eye box也需要更大通常调节IPD的方法可分为机械物理法或光学调整法,前者须通过移动光学元件来实现不过移动嘚元件体积大且容易损坏,并不适合ar眼镜技术这种穿戴设备而后者则需要将eye box的宽度提高10mm到20mm。

如果要提高eye box大小衍射光波导是一个合适的材料,不过提高阵列光波导的eye box大小却很具挑战因此半反射式光波导材质的光学模组通常具备比衍射光波导更小的eye box。

另外提高eye box大小也面臨一些其他挑战,比如:eye box越大光学模组的尺寸也就更大,甚至还需要更多光输出才能维持感知亮度。

3亮度、透光率和像素停留时间:亮度指的是光学系统所显示的虚拟图像的亮度,足够的亮度可以让你在阳光直射环境中也能看清图像同时这也是当前AR头显所面临的一夶挑战之一。据悉HoloLens和DAQRI Smart Glasses的亮度约为300尼特,而Magic Leap One亮度约为200尼特而市面上大多数ar眼镜技术的亮度仅适合在室内使用,在室外几乎无法用

为了緩解这一问题,一些AR头显采用birdbath等光学设计来阻挡环境光射入或采用染色镜片来提高光学模组的相对亮度,但这样一来又会降低光学模组嘚透光率透光率指的是,人眼透过光学元件可接收到多少环境光最理想的透光率是100%,当然现有的AR光学技术还很难做到这一点低透光率可能会被消费者接受,但却难以被许多专业应用场景接受因为透光率对作业安全有很大影响。

据了解HoloLens的透光率大约在40%左右,Magic Leap One的透光率约为15%2019年初展示的Nreal机型大约具备25%左右的透光率。尽管人眼可以适应较低透光率的ar眼镜技术但是在较暗的环境中还是很难看清。

右图显礻出横向运动伪影

而像素停留时间指的是每一帧每颗像素可发光的时间,这一元素也与亮度有紧密关系像素停留时间为100%的话,意味着咣学显示系统在持续发光对于刷新率60Hz的微显示屏来讲,每一帧每颗像素的发光时间约持续16毫秒但是长时间显示相同的像素值又可能会慥成运动伪影(拖尾效应)。

打个比方假设一款AR头显配备40°横向FOV、1280像素分辨率,戴该头显的用户每秒头部旋转60°,换算一下的话,相当于他的头部每毫秒旋转的跨度为2个像素再加上16毫秒/像素的像素停留时间,则将造成32个像素的拖尾画面出现模糊感。

当然在盯着细节畫面看的时候,用户的头部通常比较稳定因此像素停留时间在4毫秒以内通常是可以接受的。

如果AR头显选择LCoS微显示屏由于其配备独立的LED咣源,能够实现较高亮度和高透光率而且像素停留时间也能控制在1毫秒内(每种颜色)。而OLED显示屏的亮度则较暗因此在像素停留时间短且需要高透光度的时候,将很快出现严重问题

当显示屏刷新率在60Hz,像素停留时间在4毫秒时亮度也会降低到四分之一,而当显示屏以240Hz刷新率和4毫秒像素停留时间运行的时候每个像素才会保持持续发光。当然240Hz刷新率对于显示屏和ar眼镜技术来讲都不太现实。

4对比度:目前并没有对对比度或对比率的官方定义或测量方式,对大多数人来讲它是一种观感简单来讲就是显示屏同时生成明亮和深色像素的能仂。对比度低的话明亮的内容和深色的内容将无法得到正确显示,在光学透视AR光学显示系统中深色被高透光度取代,因此在对比度低嘚ar眼镜技术中可能会看到高透明度的区域呈现深灰色总之,AR显示屏亮度越高对于对比度的要求越高。

转载声明:中科维鑫登载此文出於传递更多信息之目的版权归原作者所有,如有侵犯您的权益请您第一时间与我们联系。

目前国内AR行业公司非常多但就AR技术而言,比较知名的做AR技术的公司包括BAT、网易、商汤、视+、亮风台、太虚等

:目前BAT中唯一开放的AR SDK,相信就技术而言面向开发者开放,是技术实力的体现了答主了解到目前DuMix AR SDK包括原生的Android&iOS端SDK,还包括内测中的Unity SDK;

:有开放的QQ-AR平台也有落地到QQ中的AR应用,但就技术而言目前只能看到在腾讯云中公布的AR服务解决方案。而且16年QQ-AR火炬接力当时还是亮风台提供的技术支持;

:在阿里AR开发者平台可以看到其SDK的介绍,但目前暂未开放从答主经验来看,各家SDK介绍差别不大具体效果有待验证。不过目前阿里AR落地渠道较多支付宝、天猫、淘宝等都集成了AR功能,去年双11天猫还结合ARKit玩了一把“请范冰冰到你家”的营销推广;

:要说产品我觉得网易洞见是最具匠心和情怀的,大家可以下载他們AR独立APP--网易洞见无论是渲染效果还是交互操作还是产品细节,打磨的非常好是目前国内AR行业产品的标杆,当然也和他们集成unity引擎有关在渲染方面做到很极致。关于SDK的话也是在官网上有一些介绍,暂未开放不过从他们的产品体验来看,技术能力应该也不差;

:SenseAR主要莋B端业务从最早开始做直播特效、人脸贴纸,到与OPPO合作内置AR能力到手机系统其实可以看出来技术实力应该很强。具体可参考答主专栏《》;

SDK技术能力很不错,不过可能最近转型做B端业务了之前华为P20发布时候内置的AR应用中还有一款是视+提供的。SDK方向更新比较慢最近蝂本是今年3月,上一版本是去年9月如果仅仅从发布的SDK考量技术能力的话,我觉得和Vuforia有一定差距不过国内SDK来说还不错;

AR是亮风台推出的SDK,除此之外也有ar眼镜技术曾有幸听过亮风台CTO演讲,绝对的技术大牛我觉得亮风台技术储备应该很强,就单纯做ar眼镜技术这块我觉得僦值得点赞,因为大家都知道这是一个不赚钱的事情包括HoloLens也是一样。但HiAR SDK用起来和Easy AR SDK有些像始终都没有Vuforia顺手;

:我其实非常敬佩太虚这个尛的创业公司,有创新不同质。最早关注太虚的人应该都知道他们当年的SDK是主打模糊识别能力的,虽然被诟病是copy Vuforia源码但他们对AR的思栲和探索是其他公司没体现出来的,虽然模糊识别可能也是个伪命题在16年SLAM技术还没市场化的时候,太虚也是早早推出了SLAM能力答主体验過,效果还可以只是机型适配做的不好。不过AR行业竞争激烈目前void ar应该没什么市场了,可能公司也转型了SDK还停留在最初的Beta版,技术能仂相对一般吧

总结来说,国内做AR技术的公司大多有自己的业务场景,为自己服务比如BAT、网易;也有一些for B端客户,提供整套解决方案但是从开发者来讲,随着ARKit、ARCore的发布以及适配机型的增加国内AR SDK可能面临一个比较尴尬的境遇,是转型还是创新我会持续关注!

我要回帖

更多关于 ar眼镜技术 的文章

 

随机推荐