今天,我们大多数人看到互联网上一个不透明的矩形屏幕上的一些变化。认为他们是小数字islands-black mirrors-dwarfed周围的现实世界。然后设想一下屏幕覆盖整个视野,是透明的,像一个挡风玻璃,这样数字的东西可以令人信服地混在一起真正的。
或多或少的混合现实是什么样子。先生是一个空间计算的经验,您可以使用手势或你的声音你的眼睛与虚拟交互内容。今天的早期的混合实境体验需要一个昂贵的耳机设备,包含多个运动传感器,深度传感器,和眼动跟踪相机,就像神奇的飞跃,微软的全息透镜。
“增强现实”可能是一个更熟悉的术语。先生的基于“增大化现实”技术是一个稍微不那么强烈的表弟,数字图像分层的现实的观点,但你不能与它交互实时可以在今天AR先生主要智能手机上运行,使用后置摄像头,以及一些先进的软件、捕获和衡量你对现实世界的看法。苹果和谷歌都有开发platforms-ARKit和桃色,分别创建这些经历为iOS和Android设备。
实际上,基于“增大化现实”技术,而经验,提高我们对现实世界的看法,代表空间计算连续体的一端。另一端是虚拟现实(VR),真实的世界是完全拒之门外。VR耳机的“世界观”相机在外面可能触及的远端,例如。沿着连续体的各种经验有时统称为“扩展现实”或XR。
虽然VR耳机和内容已经常见的(如果不是主流),基于“增大化现实”技术和先生仍然主要在宣传阶段,与性感先生演示视频和原型的原型后AR眼镜。事实是,一些严重的技术,有创造力,和社会文化挑战站之间XR的宏伟蓝图和真正的产品足够吸引人,毫不夸张地说,把我们的脸。但是大型科技公司正在大力投资各种XR技术的发展,很多聪明的人相信某种形式的最终将取代智能手机屏幕成为我们的主要个人电脑的空间。
我们真正想知道的是:我们总是想知道多久?何时“Magicverse”魔法飞跃称之为,一样可以拿起一双苗条的XR眼镜从我的床头柜,把它们吗?
一个更好的问题是如何快速的技术正朝着一个更精致的经验,和挑战仍然存在。为了找到答案,我问来自不同公司的专家,将在发展中扮演大角色XR的生态系统。(有些反应轻编辑已经清晰。)
神奇的飞跃一个混合现实耳机。(照片:礼貌魔法飞跃)
混合现实的宏伟愿景
开发人员和创造者关系主管格雷格·里纳尔蒂魔法的飞跃
神奇的飞跃一个被认为是一个可用的两个表现最好的XR耳机今天(另一个是微软的全息透镜)。现在提供给消费者通过魔法飞跃网站为2300美元,和美国电话电报公司将很快出售的商店。
关于数字层就会出现在我们的现实:
“今天我们生活在一个数字世界。现在有数字层。我们不能看到他们。我们可以通过手机与它们进行交互。一个社交网络。有这个概念的物理世界,然后数字世界,实际上我们看到这项技术,它不是关于耳机。耳机(就)是一个机制。
“是所有这些数字层一起工作和提供信息。这可能是公交路线信息。或者如果你是一个工程师可以了解城市下面污水系统的样子。这些功能层几乎像电台的方式。您可以调整到运输层,这可能会说这是所有的巴士在哪里,这里所有的乳房,这是所有的火车在哪里,这是所有飞行超级!
“但你可能调到娱乐。将会有几十个,成百上千的娱乐的孤独。你知道我们作为人类喜欢娱乐。所以你可以收听权力的游戏通道和你走在内河码头有龙飞翔,你会看到它,我看到它,我们与它交互,我们有这个共享经验。你觉得口袋妖怪去,但更现实和更吸引人,因为现在你可以看到在三维空间中,字符发生。我们的意思是当我们谈论Magicverse。这是关于数字内容服务。”
混合现实去上班
Greg Sullivan,外联主任微软全息透镜
微软在2015年首次推出了全息透镜1耳机和开发人员版在2016年运来。在看到一些采用在能源、建筑、制造、医疗、零售行业,该公司发布了全息透镜2 2月。第二个全息透镜也针对工作场所使用,和功能大大扩展了视野,完整的眼动跟踪,扩大手势控制,和更舒适的设计。今年晚些时候将开始航运为3500美元。
在什么之后全息透镜2:
“[客户]告诉我们很多东西我们可以改善的全息透镜2,和那些我们选择专注于浸,舒适,和有用性的。
“期待我们将继续投资于相同的三个类别。你会看到在未来版本更immersiveness,更舒适,更更有价值的应用程序。相对容易做到的这些事情但是很难做三个。
“你可以让它更身临其境的包括更强大的显示器,但是这将使设备更大、重,热,和电池寿命较短。你可以让它更舒适,使其减轻了重量,但是你放弃计算能力。所以它相对容易做到的任何一个对象-挑战是在所有三个领域取得进步。
从客户”,我们所听到的是,这些都是他们三个关键欲望,所以你可以做出一些假设在未来改进我们将全息透镜。我们会继续在这三个关键领域投资。我们有一个人为因素工程师团队将开发的新方法使它为用户更舒适。第二全息透镜我们发明了一种全新的显示技术,包含microelectrical机械传输。我们可能不得不在未来开发新类型的显示。我们将做更多的与自然交互设备。”
“一般我们想夺走平面屏幕上的数字世界,这样你不需要放下你的工具,你可以边做边学。混合现实指导有利于新类别的工人,那些使用工具或走动照顾病人。顺便说一下这些今天工人代表的大多数工人。”
Facebook, AR / VR的杀手级应用是归属感
Facebook被认为是一些最好的计算机视觉和空间计算业内人才工作在VR(如社会经历空间),基于“增大化现实”技术的经验对智能手机应用程序像Instagram,信使,Facebook。Facebook的第一消费产品,门户主扬声器/摄像头,提供了一些基于“增大化现实”技术experiences-expect公司在未来增加更多。公司拥有眼睛,开发虚拟现实耳机,但很有可能探索选择释放更多的基于“增大化现实”技术的硬件产品在未来。
AR / VR经验主管瑞秋·富兰克林,Facebook,为什么公司专注于基于虚拟现实的社会经验:
“现在耳机存在在VR的大众市场,所以我们肯定这个领域。但我认为(VR和AR)都是非常重要的;我不认为一个胜过另一种。
榕树Kirkpatrick,工程总监AR / VR在Facebook, Facebook是如何使用基于“增大化现实”技术的今天社会经历:
瑞秋·富兰克林,避免使用替身恐怖谷,令人毛骨悚然,看起来几乎人类表示的无人区,但不完全是,真实:
这很有趣,因为有技术挑战但也有社会接受挑战。回到虚拟现实,在耳机你身体上有一些在你的脸上。即使我们试图复制你完全没有一个化身,我们仍然会给你脸上的东西。我们今天使用的头像,你可以看到空间是相当基本的,一直到Facebook现实实验室的亚瑟·谢赫的实验(超级逼真的,但年市场化)编解码器化身,这是试图“恐怖谷”的飞跃。
肯定”,从技术的角度来看,正确面对,正确动作,正确的情绪通常只有在这些经验的表示自己你引导远离“恐怖谷”。很多研究《阿凡达》的工作,不是真的想给你一个表达式的使用所有的能力,所有的数字魔法让你表达自己的思想,但并不真正现实的一边。”
智能手机将扮演着重要的角色在XR的不久的将来
阿帕纳Chennapragada,副总裁产品,基于“增大化现实”技术和虚拟现实,谷歌
谷歌发布以来已经走过了漫长的道路谷歌眼镜smartglasses。谷歌使用计算机视觉技术的基于“增大化现实”技术的产品,包括谷歌眼镜应用程序和它的桃色手机增强现实平台。谷歌现在正在测试一个协作基于“增大化现实”技术的方向特性地图应用。
谷歌如何思考基于“增大化现实”技术:
在计算机视觉将如何推进未来基于“增大化现实”技术:
“人类是视觉动物,30%的皮层神经元是致力于视觉的理解。例如如果我看着杂货店货架谷物我会看看整个架子上,看着一堆谷物,说我在找那些无谷蛋白。作为计算机视觉变得更好我们应该从一件事转移到整个场景并能够理解整个场景,不管是整个文档或整个商店的架子上。第二个维度是不只是给你信息,但是能够覆盖信息。例如在商店货架的情况下不是很好如果你可以屏蔽[其他]和只显示无谷蛋白的谷物吗?
”和最后一个维度是对不只是给你信息但是做事,真正采取行动。有时这些事情可以很简单,比如翻译:你在现场看到一门外语,它会自动为您翻译。很明显有一些非常困难的技术问题潜在的这些东西,这就是为什么我告诉我工程师的工作安全。
在好电话基于“增大化现实”技术的原因:
“人们谈论[阿拉伯文]。现在为什么感到兴奋吗?对我来说有三个原因,现在都聚在一起。这是一大跳深学习计算机视觉和机器学习技术,帮助更好地认识事物。第二个是我们了解世界更多的诸如谷歌知识图,(已经)超过500亿事实对各种各样的事情。
“第三件事是…有30亿用户提供手机和相机是最常用的工具是多一个人使用手机拍照的各种各样的东西。我们一起把这些东西我们认为不需要等待最终的基于“增大化现实”技术的其他形式因素强大。手机实际上是一个非常强大的计算平台。
副总裁安德烈Wong博士、3 d传感、Lumentum
Lumentum使VCSEL激光器用于iPhone的真正的深度摄像系统。今年很可能至少有一个的iphone将包含后置深度相机,(“世界面对”)让ARKit应用更加令人信服。深度照相机将越来越多地出现在Android手机的支持。
手机增强现实:
“从我的观点基于“增大化现实”技术可能会体现在一些更简单,可行的用例与你的手机。仅仅因为人们会用手机。我个人一直觉得如果人们不得不穿的东西,直到一千年的选择,它不会抓住效果很难让人们穿的东西。谷歌眼镜的问题在于,它只是看起来荒谬。
前置三维遥感主要应用在生物识别技术。前置摄像头的一米范围内的需求。我们一直致力于与我们的客户是1米,增加到三个4米(后置深度照相机)。
ARKit发布苹果和谷歌已经释放了桃色,如果你尝试一些基于“增大化现实”技术的应用,像Houzz或者宜家,他们合理的工作。他们已经创建了这个平台,基于“增大化现实”技术的准备。我们缺的是很好的深度地图空间扫描。一旦这些世界面对相机出来,结合双相机已经在高端智能手机的背上,然后基于“增大化现实”技术的游戏,大量的基于“增大化现实”技术的应用变得越来越有用了。”
相机作为下一个计算平台
Allison木头,创始人兼首席执行官,相机的智商
相机智商帮助品牌在社交媒体创建和分发增强现实体验。
在计算机视觉的出现:
“我们看到,发生在今天的规模是社交媒体。我们看到,发生在Facebook上Snapchat和Instagram TikTok他们使用计算机视觉映射的狗耳朵你的脸或试穿眼镜。但技术的承诺比这更多。通过计算机视觉,我们可以开始了解我们周围的世界,本质上允许互联网和现实世界生活在同一个时间和空间。
在空间计算和至高无上的镜头:
“发生本质上是通过一个相机,一台电脑,和一个屏幕。所以你可以考虑摄像机作为其他数据集包括视觉的清算所的元数据,地理位置数据,其他数据集可以想象。结合在一起可以表面上下文相关的内容。相机基本上成为了主要的接口在多通道分布式计算模式。有些人谈论它是空间计算。当我说多通道的时候,我的意思是,可以视觉输入,输入你的声音,可以手势输入,输入可以联系。这些数据可能来自其他电脑像我们穿的手腕。”
“我们看到每一个技术平台,无论是Facebook推出门户网站基本上是一座超级高的摄像头和屏幕已经基于“增大化现实”技术的功能或Snapchat的眼镜,这不仅仅是一双很酷的太阳镜,你可以视频,为了自己的下一代硬件。因为如果你的相机和你的硬件,你自己计算平台。”
5克会让你变成一个黑镜子集(“好方法”)
总裁克里斯蒂亚,高通
高通希望移动处理器能力的下一代AR-enabled智能手机。芯片制造商预计,这些经验会发生XR眼镜通过USB-C范围的智能手机。它最近宣布它将提供参考设计(由855芯片Snapdragon)帮助手机制造商开发的设备。
快速的短期影响5 g网络混合现实设备和服务:
“从非常卑微的5 g能做什么,开始下一个大事件是我们一直在做的是你可以开始利用云计算能力的优势。这样你可以考虑5 g不仅仅是宽带连接,但作为一个电脑你的移动设备和云之间的联系。你有无限的计算或计算的需求。今天一些游戏和虚拟现实游戏需要一个先进的游戏电脑。你不需要;你可以在你的手机上。”
快5 g的长期影响混合现实设备和服务:
“我要到年底的光谱有什么你可以得到5 g。我曾经开玩笑说,你可以进入黑镜子集,在一个很好的方式。如果你思考的能力增强现实设备结合5 g的功能和社交网络…假设你有5 g服务部署,你有高速度非常低的延迟,现在突然所有人都戴着一个配套的设备,这取决于如何电话evolves-what看起来太阳镜。设备将混合现实功能的相机。
“你走进一间房间,立即使用相机与人脸识别ai和与云100%的时间,你能认出他们是谁,回到他们的LinkedIn账户,他们Instagram帐户,他们的Facebook帐户,这将提供他们的信息连接,当你与他交流,等等等等这些事情是可能的。
“我们已经看到一些设备开始像眼镜。我认为5克真的会解锁增强现实技术的潜力,因为它是一个游戏的规模。我认为更多的设备,它将加速,然后你将会有更多的应用程序。事实上我舒适的声明,5 g是失踪的成分混合现实允许基于“增大化现实”技术的设备规模。它不仅能解决内容问题,但能解决形式问题,卸载计算能力的云。”
忘记“神奇。”Focus on style and utility
高级副总裁史蒂夫•辛克莱产品&营销在魔力的愿景
魔力是一个早期的基于AR / VR公司在萨拉托加,加利福尼亚。公司还没有谈到产品的建筑,但它是由一些大的名字,包括科斯拉风险投资公司,融合基金,杜比家庭企业。辛克莱是前者在苹果iPhone产品经理。
On XR炒作与现实:
“基于“增大化现实”技术的行业已经开始把一个角落。我们已经陷入了一场炒作周期由一些早期的基于“增大化现实”技术的进入者和我们刚刚开始看到消费者和商业解决方案,解决实际问题。”
在主流应用的要求:
“基于“增大化现实”技术的硬件平台与大众市场会看到牵引消费者将不仅提供实用工具,但也强调真正的流动性和社会可接受性。如果你不能早上穿上一个基于“增大化现实”技术的解决方案,整天穿着它,它不会成功。科技的外观和感觉normal-essentially需要无形的。我不只是在谈论你如果需要大的硬件明显的手势来控制它或让你触摸你的脸或在公共场合大声的对自己说话,它不会看到大规模采用。
“捕捉消费者的想象力,基于“增大化现实”技术的企业将不得不提供吸引人的内容,不仅仅是相同的信息我可以看到在我的智能手机或smartwatch今天…的重要组成部分,是确保信息的上下文。它必须是正确的信息在正确的时间。的另一面是知道什么时候不要打断别人。在错误的时间增加世界将加剧设备的问题分心,我们看到今天的智能手机。”
基兰厅,Rokid战略伙伴关系发展
Rokid,总部设在中国,使混合现实眼镜用于工人,但是打算提供给消费者市场的成熟。该公司表示,其新的Rokid玻璃AR眼镜将成为普遍在2019年晚些时候推出。
XR眼镜人们会穿:
“我们花了许多时间思考如何人感到穿着设备。这个设备是一个辅助技术在有人类参与的流程链来完成一个任务。我们试图建立一个设备的舒适穿社会至少一副太阳镜。他们(其他的基于“增大化现实”技术公司)使military-looking事情让用户看起来像一个机器人。我们喜欢额外的元素的风格。
”在大范围内我们谈论质量技术的采用,尤其是消费者,谁想要融入他们的生活方式。最初,他们可能会专注于一件事,这样可以提高体验一个小小的不便。然后他们意识到,有一大堆的事情可以改进的技术。”
在魔法飞跃超出早期采用者的需要(有人说它!):
“神奇飞跃有很大的技术和一个非常糟糕的产品。他们与消费者的期望。他们释放这些令人印象深刻的视频,然后释放的一种设备,留下深刻印象。这不是一个相当大的一步从全息透镜。问题是,他们的消费者对该技术的看法。当我们试图推出一种新产品,消费者会用这些减少的预期。”
在需要令人信服的内容:
“这将是内容工作室创建的内容将取悦消费者。定义的经验可能是一个游戏玩的游戏中,玩家可以参与。内容制作公司需要决定人们想要的东西。有人要把握好其中的平衡,有人在正确的情况下使用正确的设备,人们可以负担得起。他们必须有合适的规模。”
斯蒂芬•湖的共同创始人兼首席执行官,北方
北焦,一双600美元smartglasses显示信息,如信息、日历提醒,天气,和地图和方向,包括亚马逊的Alexa语音助理。
风格,适合和舒适:
“其他公司都专注于特定用例在客厅里像消费体验,或者在企业工作经验,但我们真正的远见和重点是元素的数字世界,我们从我们的手机在日常smartglasses今天和给你。得到个人电脑的好处没有移动设备的干扰。对我们来说这是一个不同的权衡在我们的产品和其他产品。我们不像我们那么关心不同的传感器风格和适合性和舒适性,并为你完美的大小。特别是对于那些已经不得不戴眼镜。
“我们不是要创建经验,你看到独角兽跳过彩虹,我们并不是对壮观的产品演示。我们感兴趣的是全天的日常产品,今天的设计融入你的生活。”
在混合实境体验:
“我想在这个行业有许多的产品竞争在他们的视野,他们地址多少深度的飞机。和这些事情可能是重要的对于某些类型的用户,但对我们来说这是关于我们如何保持用户在现实世界中。我们如何让一双smartglasses你实际上想要用一整天吗?“身临其境”这样的词不一样重要。我们不是要传送你远离现实;我们要让现实世界更好。我们支持你在你想完成什么。”
XR在未来几年面临的挑战
Timoni西方,研究主管联合实验室
联合实验室、联合技术的一部分,发展混合现实内容创作工具。
多通道用户控制:
“控制器仍游戏的名字在未来两到三年。它仍然感觉很尴尬当人们与数字对象(用旧模式)。计算机无法真正读懂我们的思想。非常令人兴奋的思考水陆空联运输入methods-combining眼动跟踪、语音识别、手势,fingerbone tracking-then你要接近魔法的地方。你接近哈利波特铸造一段时间的感觉。但即使这样你要做很多的校准所有一起工作。
“这是关于创建一个新的与计算机交互的方式。感觉自然。一些当前的系统仍在使用控制[数字]按钮按下的主题。但仍然是一个按钮按下的一个按钮按下。我们需要看到的是更多的主体级的东西。他们要做的研究水平工作来构建这些模式的基础,未来三至五年。我们将会看到很多探索这些输入是如何工作的。”
阿加莎,设计领先,阀门
阀门设计虚拟现实耳机和软件。余曾在Facebook的虚拟公司首席产品设计师的眼睛,眼睛的,她将重新启动软件2018年9月在离开之前。
在混合真实感的技能:
XR发展和移动应用程序开发:
“在程序设计中,非常流驱动的。你可以组织应用分为几个阶段。你向他们展示阶段,第二阶段,第三阶段,等等。在混合现实我们无法控制用户的动作,所以我们必须设计更多的概率。这就是与人工智能相吻合,因为我们可能有18个不同的参数,从用户的输入环境,我们要算出用户想要做什么。设计师必须考虑用户的意图,和环境总是不同的。”
Hodent百万级的工作Fortnite游戏而用户体验主管史诗般的游戏。她是这本书的作者玩家的大脑:神经科学和用户体验如何影响游戏设计。
虚拟现实变得更加社会:
“我们看到在VR更多人游戏,但也有一些严峻的挑战。人类是社会动物,我们需要联系,人们希望分享虚拟现实的社会空间。但是我们需要考虑我们的关系之外的其他需求;能力和自主权。这三个需求是我们内在动机的核心。我们不仅需要共享一个公共空间在VR更引人注目,但我们如何相互作用在这个空间必须有意义的表达我们的自主权(如创建一起)和能力(如有互补的角色一起完成一个挑战),同时,当然,作为一个安全的地方(免受骚扰和其他反社会行为)。
“如果你看看Fortnite这不仅仅是一个游戏。这是一种社会经验,人们可以在见面Fortnite空间和闲逛。虚拟现实是强大的,因为你可以完全沉浸在一个虚拟空间。我认为这是真的会爆炸。的一个挑战,当你在一个虚拟空间,您需要与别人有眼神接触。为此我们需要耳机内眼动跟踪传感器。你希望能够看到别人看在一个虚拟的社会空间。你希望能够告诉当有人看着我们的眼睛…我们必须克服这些技术挑战,让它一个可信的经验——事实上科技已成为他们生活的不觉得不可思议的。”
电脑的未来空间
毫无疑问,一些严重的技术挑战阻碍发展中一双XR眼镜足够时尚,你想在公共场合穿很长时间。组件需要足够的计算能力放入一个小空间在一个人的脸孔让一切cool-just尚未准备就绪。科技公司仍然难以实现图形分辨率的人眼能够看到,扩展视野,接近眼睛的自然的视野,和创建遵循人类凝视的眼动跟踪准确。从消费者的角度来看,混合现实经验到目前为止我看过觉得工作进展。
大量的XR内容经验将是可用的,包括游戏和其他娱乐。还有一个鸡生蛋还是蛋生鸡的问题:软件开发人员不想大美元投资于创造XR的经历,直到他们看到的硬件销售,但人们不会想要的硬件,直到有很多游戏和娱乐玩。
这些问题都可以解决。斜视着黑色小矩形的日子和啄应用也许时日无多了。会是某种形式的XR眼镜,解放我们的范式?也许吧。或者相机智商的Allison木表明,XR可能出现在各种各样的设备。
可能归结到一个问题的真正重要的数字内容是生活快乐而有效地控制公司给消费者多少内容。人们真正想要的数字层和全息图会出现在他们的世界观一整天吗?如果他们的价格好XR眼镜然后他们会同样适应类似的基于“增大化现实”技术的隐形眼镜?如何只顶数字内容到光学神经吗?距离太近吗?
这将是消费者决定这些事情。上面的个人和企业,和其他人喜欢他们,必须仔细聆听成功导航技术在未来十年的转变。