所在位置:首页 >  i媒体 > 正文
爱就投:AR技术的应用场景及案例(全)
发布时间:2018-01-25      来源:爱就投
导读
今天聊一聊被炒得火热的AR(Augmented Reality 增强现实)技术。

应广大读者要求,特将爱就投项目经理原创的《AR技术的应用场景及案例》(上,下)两篇全文推送给读者,仅供阅读参考,转载请注明来源:爱就投 i9tou_pub

今天聊一聊被炒得火热的AR(Augmented Reality 增强现实)技术。

这份报告认同以高盛为代表的认为HMD(头戴式设备)将成为新的通用计算平台,取代当前的手机和PC的观点[1];同时预计,5年内AR领域总收入的近一半将是通过硬件销售(产品试商业模式)获得的,总收入的另一半则主要基于交易平台、广告和免费增值,这3类商业模式获得;行业方面,零售、医疗、教育、游戏、工程和军事,这6个行业将重点被AR技术改造。

作者认为,在3年后以至更远的时期,AR领域的收入和前景将远大于VR(Virtual Reality 虚拟现实),因为AR可以占有更多的用户时间,获得更丰富的用户数据;AR本身属于人机交互方面的前端技术进步,其对现有行业原有的交易结构不会构成颠覆。最后,我们将总结针对AR项目的投资建议。


本文为应用场景及案例篇(上)

本篇选取并介绍AR技术在12个场景下的17个典型应用案例,它们的共同特点是增强人们对现实环境的感知与控制。这些AR应用案例可以分为3类:增强对现实环境中物体的感知、在现实环境中控制虚拟的物体、在虚拟环境中控制现实的物体。

AR是把数字想象叠加在真实世界之上[1]。以下9个案例属于增强对现实环境中物体的感知这一类,它们展现了AR技术的7个应用场景:位置服务、同步翻译、社交、运动、驾驶、手术、军事。

1. 位置服务AR——Wikitude、Metaio Junaio

Wikitude和Metaio Junaio两款产品利用智能设备识别现实环境,并将其中物体和场景的相关数字信息提供给用户,从而创造增强现实体验。

Wikitude是一家奥地利AR技术公司,在2008年10月就推出了第一个LBS(基于位置服务)类型的增强现实应用[2]。公司还提供开发者平台Wikitude SDK,可实现影像识别和跟踪、3D模型渲染、视频叠加[3] 。


Wikitude 视频叠加

Metaio是一家德国的AR技术解决方案提供商,除提供类似Wikitude的SDK之外,还推出了AR移动浏览器Junaio。Junaio的技术将LLA(纬度,经度,海拔)标记的精确性提高了一大步,克服了GPS导航的精确性限制问题[4]。2015年5月,Metaio被苹果收购[5]。


Metaio Junaio 位置服务

2. 同步翻译AR——Word Lens

Word Lens是一款AR同步翻译应用。用户将智能设备的摄像头对准外文,Word Lens就会快速扫描和识别文本,将其翻译成其它语言,再将翻译后的文本以原有的显示形式(字体、字号、颜色等)展现在设备屏幕上[6]。开发Word Lens的美国公司Quest Visual,于2014年5月被谷歌收购[7]。


Word Lens 同步翻译

3. 社交场景AR——InfinityAR Engine

Infinity AR是一家以色列AR技术公司,目前为AR硬件开发者和应用程序开发者提供名为InfinityAR Engine的技术解决方案[8]。公司的宣传片描述了产品的其中一个应用场景:我们在现实环境中看到的人脸,被迅速与其在社交网络上的照片进行匹配,我们可以迅速获得匹配的目标在社交网络中发布的信息[9]。这项功能一方面非常可能受到执法部门的欢迎(如扫描人群,寻找通缉犯),另一方面也可能引发人们对隐私的担忧。


Infinity AR 社交场景

2015年4月,Infinity AR获得了500万美元的B轮融资,投资机构包括日本的游戏公司SUN Corporation、新西兰投资基金Singulariteam Fund II等[10]。

4. 运动场景AR——Recon Jet

Recon Jet是运动型的谷歌眼镜,可以实时收集和分析环境数据,反馈给用户新的有用信息,从而使人类能力得到延伸[11]。通过Recon Jet,跑步者可以实时了解自己的速度,到终点线的距离,海拔高度、心率等。其目前的功能包括提供运动员实时的状态信息、天气信息、导航服务、社交功能。公司还计划推出适用于高强度环境的可穿戴AR设备,主要给在危险环境中从事劳动的人群提供帮助[12]。


Recon Jet 运动场景

另外,Recon Instruments公司也提供SDK,方便开发者创建新应用以使自身功能更丰富。2015年6月,Recon Instruments被英特尔收购[13]。

5. 驾驶场景AR——iOnRoad、BMW ConnectedDrive HUD

iOnRoad和BMW ConnectedDrive HUD两款产品是AR技术在驾驶场景下的典型应用。

iOnRoad是一款AR安全驾驶应用,利用智能设备的摄像头和传感器检测主人车辆前方的车辆[14],从而在驾驶过程中给予及时预警(包括碰撞、追尾偏离车道、超速)、实时分析(包括路线、油耗、速度和加速情况、安全情况、排放情况)、视频和图像采集(包括驾驶录像、不文明驾驶行为抢拍、黑匣子功能)。用户还可以使用iOnRoad保存上次的停车地点,以便通过GPS引导到自己的车[15]。开发iOnRoad的以色列公司Picitup,于2013年4月被哈曼国际工业收购[16]。


iOnRoad 驾驶场景

BMW ConnectedDrive HUD与iOnRoad的不同之处主要是将车辆行驶的相关信息投影在挡风玻璃上。BMW ConnectedDrive HUD增强现实的方式是将虚拟标记叠加在车主前方视野中的物体上,使预警、导航等信息能够显示在前方道路的精确位置上,导航指示与道路层叠,其它汽车或安全相关的物体根据情况高亮显示或标记出来[17]。


BMW ConnectedDrive HUD 驾驶场景

6. 手术场景AR——Mobile Liver Explorer

Mobile Liver Explorer是AR技术在外科手术场景下的典型应用,利用智能设备的摄像头捕捉器官的影像,同时将手术计划数据进行2D和3D成像再叠加到器官上,从而在手术过程中为医生提供实时的引导和辅助。Mobile Liver Explorer还可以对手术中的新情况做出响应,比如通过监测枝节的长度,及时更新手术计划[18]。


Mobile Liver Explorer 手术场景

Fraunhofer MEVIS是一家德国的医学图像计算技术公司,开发用于临床工作的互动辅助系统[19]。Mobile Liver Explorer是公司推出的其中一项软件类技术解决方案,核心作用是降低手术失血量[18]。以此为代表的应用有望被运用在各类外科手术中。

7. 军事领域AR——Q-Warrior

Q-Warrior是军事领域的代表性AR产品,主要为地面部队提供态势感知信息,实现敌我识别、夜视影像等增强现实功能;头盔佩戴者之间可以共享地理位置信息,便于战斗和侦查行动中远程协调小分队[20]。以此为代表的产品有望在更多危险工作场景中被应用。


Q-Warrior 军事领域


在下篇中,我们将介绍AR技术在另外5个场景下的8个典型应用案例,它们可以分为2类:在现实环境中控制虚拟的物体、在虚拟环境中控制现实的物体。


本文为应用场景及案例篇(下)

本篇选取并介绍AR技术在12个场景下的17个典型应用案例,它们的共同特点是增强人们对现实环境的感知与控制。这些AR应用案例可以分为3类:增强对现实环境中物体的感知、在现实环境中控制虚拟的物体、在虚拟环境中控制现实的物体。

AR是把数字想象叠加在真实世界之上[1]。以下8个案例属于在现实环境中控制虚拟的物体,或在虚拟环境中控制现实的物体,它们展现了AR技术的5个应用场景:购物、游戏、工程、家庭服务、综合应用。

8. 购物场景AR——IKEA Catalogue、UNIQLO Magic Mirror、无限1号店2.0

IKEA Catalogue和UNIQLO Magic Mirror两款产品让用户在收货之前可以获得更真实的试用体验,属于在现实环境中控制虚拟的物体,而无限1号店2.0属于在虚拟环境中控制现实的物体的AR应用案例。

IKEA Catalogue是宜家的年度产品目录应用,从2013年的版本开始被加入了增强现实功能[21]。用户借助IKEA Catalogue app可以在智能设备上看到不同家居摆在自己家里的模拟效果,从而更容易确定家居的尺寸、颜色、摆放位置等。2016 IKEA Catalogue app可以实现更真实的3D模型渲染[22][23]。IKEA Catalogue app的开发者是AR技术解决方案提供商Metaio(现已被苹果收购[5])[24]。


2016 IKEA Catalogue app 家具摆放

UNIQLO Magic Mirror可以让用户从镜子中看到同一款式下不同颜色的衣服穿在身上的效果,这台位于美国旧金山联合广场的优衣库门店。用户首先被识别出穿得是哪一款衣服,进而在触摸屏上选择不同的可用颜色,镜子就会将用户身上的衣服以新的颜色投射出来[25]。UNIQLO Magic Mirror的开发者是AR技术解决方案提供商Holition[26],其功能是基于Kinect的颜色变换引擎和一个半透明反射镜触摸屏实现的[25]。


UNIQLO Magic Mirror 试衣场景 

无限1号店2.0是中国电商1号店在2012年10月推出的LBS类型的增强现实应用,利用手机App让用户在线下看到立体的虚拟商场;公司希望把传统零售和电商的优势起来,让用户享受逛商场的乐趣[27]。基于AR技术的虚拟的无限1号店与真实线下店相比,优势包括开店地域无限、商品货架无限、营业时间无限、零物业成本,5分钟开店成功等[28]。

无限1号店概念的面市可能过于超前,不论是吸引宅在家里的用户到线下去购物,还是让处在户外环境的用户享受无间隙购物,其利用智能手机创造的增强现实体验还难以产生足够的吸引力,从而改变大多数用户的习惯。但这一概念仍然是购物场景下AR技术的典型应用案例。

无限1号店2.0 购物场景

2016年的CES Asia上,1号店还推出了感知型购物技术,与UNIQLO Magic Mirror类似,其通过扫描用户面部并建模,实现用户在挑选衣服或化妆品时,服装和面部肤色可以自动更换,即虚拟试妆、试穿[29]。在未来,无限1号店的概念有望借助更成熟的AR技术真正打开市场。

9. 游戏场景AR——Ingress

Ingress是一款基于位置服务的大规模多人AR网络游戏[30][31],以现实环境为蓝图,基于谷歌地图建立游戏场景;游戏中,启蒙军阵营和反抗军阵营的特工(玩家)需要夺取和控制真实世界中的传送门(以雕像、纪念碑、独特建筑等形式呈现)[32][33]。

Ingress利用智能设备的GPS等获得玩家位置信息,并对玩家显示周围的传送门及其它物品;玩家可以接近传送门并进行部署、入侵、补充能量、发射XMP炸弹等动作[34]。开发Ingress 的公司Niantic原是谷歌内部的创业项目,于2015年8月脱离谷歌[35]。

Ingress 游戏场景

10. 工程领域AR——SART、WorkLink

SART和WorkLink是工程领域的两款代表性AR产品,它们让工作人员可以参照动态的模拟效果或指导进行每一步实际操作,从而节省完成项目所需的成本和时间,提高工程质量。

SART(智能增强现实工具)是空中客车在2011年启动研发的AR技术解决方案,在内部也被称为MiRA(混合增强现实),其目的是实现全球工厂生产产品质量标准化[36]。SART利用平板电脑的摄像头捕捉实际装配的影像,同时与数字设计模型结合显示在屏幕上;工作人员可以对照飞机的3D模型,检查装配好的部分是否有遗漏、错位和损坏的支架部件[37]。

2016年4月,空中客车宣布SART已经被Spirit AeroSystems(世界最大的飞机结构件供应商之一)选用,将被部署在位于美国和法国的两个A350 XWB零部件工厂[36]。SART目前已经在位于法国、德国、西班牙的A320、A380、A350 XWB、A400M生产线上被使用。通过SART,检查A380机身上6万至8万个支架所需的时间从3个星期被缩短到了3天[37]。

SART 工程领域

WorkLink通过增强现实的方式实现组织成员之间的信息和技能共享,并保证专家的知识被实时记录,整个组织始终保持最新的信息和指导[38]。其一方面作为平台,方便企业客户为自己的项目或产品设计创建用于执行的AR智能指导;另一方面,WorkLink通过将传统的纸质或电子文档说明书转变成智能的说明书,让工作人员看到叠加在真实世界之上的生动、直观的3D成像,从而使知识能够被更多地吸收,使指导获得更高的效率[39]。

推出WorkLink 的是工业AR技术解决方案和产品提供商Scope AR。WorkLink 在平板电脑、智能手机和可穿戴设备上都可以运行[38]。

WorkLink 工程领域

11. 家庭服务AR——LG Hom-Bot Turbo+

LG Hom-Bot Turbo+ 是结合了AR技术的真空清洁机器人[40],用户通过手机App实现与机器人的互动。一方面,用户利用智能手机拍摄下家中的特定区域,然后在App上标记出需要清理的位置(无需精确指明方向或路线),机器人便开始工作。另一方面,机器人身上也安装有前置摄像头,从机器人的视角向用户展示清洁进度,或者仅仅帮助用户观察家里的情况。当前置摄像头检测到异动时,机器人还会向手机端发送提醒信息[41]。

LG Hom-Bot Turbo+ 家庭服务

LG Hom-Bot Turbo+ 属于在虚拟环境中控制现实的物体的AR应用案例。

12. 综合应用AR——SixthSense

SixthSense是麻省理工学院媒体实验室开发的手势界面系统及可穿戴设备,通过增强现实使人们可以凭借手势与虚拟环境以至现实环境进行交互。从硬件来看,SixthSense由3部分组成:Projector(投影仪)用于在物体表面上投影视觉信息;Camera(摄像头)用于识别和跟踪物体和用户的手势;Color Markers(视觉跟踪基准点)用于将物体和用户的手势区分开来。其利用计算机视觉技术,根据摄像头捕捉到的物体位置变动和视觉跟踪基准点位置变动,结合投影的视觉信息,计算出用户的操作意图[42]。

SixthSense 综合应用

SixthSense系统和设备可以将几乎任何物体的表面变成屏幕,因此被归为综合AR应用。


不同应用场景的AR产品搭配的商业模式也不同。在下篇中,我们将介绍涉及AR概念的公司一般采用的4类商业模式:硬件销售、交易平台、广告和免费增值。

参考文献:

[1] Virtual reality (VR) and augmented reality (AR) have the potential to become the next big computing platform, according to Goldman Sachs Research 网址:http://www.goldmansachs.com/our-thinking/pages/virtual-and-augmented-reality-report.html

[2] Wikitude: Android App With Augmented Reality: Mind Blowing 网址:http://digital-lifestyles.info/2008/10/23/wikitude-android-app-with-augmented-reality-mind-blowing

[3] The world’s leading augmented reality SDK 网址:http://www.wikitude.com/products/wikitude-sdk

[4] Wikipedia: Metaio 网址:https://en.wikipedia.org/wiki/Metaio

[5] Apple Buys German Augmented-Reality Firm Metaio 网址:http://blogs.wsj.com/digits/2015/05/28/apple-buys-german-augmented-reality-firm-metaio

[6] Wikipedia: Word Lens 网址:https://en.wikipedia.org/wiki/Word_Lens

[7] Google acquires Word Lens app recently featured in Apple’s iPhone ad “Powerful” 网址:http://9to5mac.com/2014/05/16/google-acquires-word-lens-app-recently-featured-in-apples-iphone-ad-powerful

[8] ABOUT INFINITY AR 网址:http://www.infinityar.com/about-infinity-ar

[9] YouTube: Infinity Augmented Reality (Infinity AR) 网址:https://www.youtube.com/watch?v=X8z5TozXsSs

[10] InfinityAR to Receive Investment of $5M; Investors Include Strategic Japanese Partner SUN Corporation 网址:https://pr.blonde20.com/infinityar-seriesb

[11] Recon Jet review: Google Glass for sports is here, and it works 网址:http://mashable.com/2015/04/16/recon-jet-review/#Gy996.WI35q3

[12] Recon Jet 网址:http://www.reconinstruments.com/products/jet

[13] Intel Acquires Recon Instruments 网址:http://www.reconinstruments.com/2015/06/intel-acquires-recon-instruments

[14] iOnRoad Augmented Driving 网址:http://www.pcmag.com/article2/0,2817,2402079,00.asp

[15] iTunes: iOnRoad - Augmented Reality Driving 网址:https://itunes.apple.com/us/app/ionroad-augmented-reality/id569507817?mt=8

[16] Harman buys Israeli road safety app developer iOnRoad 网址:http://www.globes.co.il/en/article-1000835964

[17] BMW HUD 网址:http://www.bmw.com/com/de/insights/technology/connecteddrive/2013/driver_assistance/highlights/head_up_display_%20highlight.html

[18] Fraunhofer-Institut für Bildgestützte Medizin MEVIS Mobile Liver Explorer 网址:http://www.mevis.fraunhofer.de/index.php?id=700&L=0

[19] Fraunhofer MEVIS - Institute for Medical Image Computing, Bremen/Germany 网址:http://www.linkedin.com/company/fraunhofer-mevis

[20] Q-Warrior® Helmet-mounted Display 网址:http://www.baesystems.com/en-us/product/qwarrior-helmet-mounted-display

[1] Virtual reality (VR) and augmented reality (AR) have the potential to become the next big computing platform, according to Goldman Sachs Research 网址:http://www.goldmansachs.com/our-thinking/pages/virtual-and-augmented-reality-report.html

[5] Apple Buys German Augmented-Reality Firm Metaio 网址:http://blogs.wsj.com/digits/2015/05/28/apple-buys-german-augmented-reality-firm-metaio

[21] Ikea’s Augmented Reality Catalog Will Let You Peek Inside Furniture 网址:http://www.wired.com/2012/07/ikeas-augmented-reality-catalog-lets-you-peek-inside-the-malm

[22]  iTunes: IKEA Catalog 网址:https://itunes.apple.com/us/app/ikea-catalog/id386592716?mt=8

[23] YouTube: IKEA 2016 Catalogue: Augmented Reality 网址:https://www.youtube.com/watch?v=xC6t2eEPkPc

[24] IKEA app to bring 2013 catalogue to life with augmented reality 网址:http://www.knowyourmobile.com/products/17864/ikea-app-bring-2013-catalogue-life-augmented-reality

[25] UniQlo’s magic mirror 网址:http://retail-innovation.com/uniqlos-magic-mirror

[26] Holition about us 网址:https://holition.com/about-us

[27] 1号店虚拟线下店:超前创新还是尴尬概念(组图) 网址:http://news.xinhuanet.com/tech/2012-10/16/c_123826424_2.htm

[28] 1号店创移动电子商务新模式 线上线下优势融合 网址:http://finance.chinanews.com/life/2012/10-16/4250328.shtml

[29] 【直击CES】连电商都来了!1号店要做黑科技的生意 网址:http://m.yicai.com/news/5012777.html

[30] Ingress: A Game, Lifestyle and Social Network in One! 网址:http://www.wheninmanila.com/ingress-game-lifestyle-social-network

[31] Wikipedia: Ingress (video game) 网址:https://en.wikipedia.org/wiki/Ingress_(video_game)

[32] Ingress說明:選擇陣營 网址:https://support.ingress.com/hc/zh-tw/articles/207441277-%E9%81%B8%E6%93%87%E9%99%A3%E7%87%9F

[33] Ingress說明:尋找能量塔 网址:https://support.ingress.com/hc/zh-tw/articles/207441797-%E5%B0%8B%E6%89%BE%E8%83%BD%E9%87%8F%E5%A1%94

[34] Google Launches Ingress, a Worldwide Mobile Alternate Reality Game 网址:http://allthingsd.com/20121115/google-launches-ingress-a-worldwide-mobile-alternate-reality-game

[35] Google's internal start-up Niantic Labs spins off 网址:http://fortune.com/2015/08/13/googles-niantic-labs-spins-off

[36] Airbus Group Unit Testia to Supply Augmented Reality System To Spirit AeroSystems 网址:http://www.airbusgroup.com/int/en/news-media/press-releases/Airbus-Group/Financial_Communication/2016/04/Airbus-Group-Unit-Testia-to-Supply-To-Spirit-AeroSystems~query=P3RvcGljcz1lNDE4ZWQ5YS1iNTBmLTRkMWItYmI0Zi01YWI1YWFjMzM0MWImdG9waWNzPXZfMGM5NGIzYTUtYzdmMC00OTYwLWE0NzYtMTJjOTRkMDg0ZmUx~.html

[37] Spirit AeroSystems deploys Airbus augmented reality tool for composite fuselage brackets 网址:http://www.compositesworld.com/news/spirit-aerosystems-deploys-airbus-augmented-reality-tool-for-composite-fuselage-brackets

[38] SCOPE AR: AN AUGMENTED REALITY COMPANY 网址:http://www.scopear.com/about

[39] ABOUT WORKLINK 网址:http://www.scopear.com/products/worklink

[40] An augmented-reality robot vacuum cleaner? We'll see it at CES 网址:http://www.cnet.com/products/lg-hom-bot-turbo-plus

[41] LG's Hom-Bot Turbo+ Robot Vacuum Cleans And Guards The Home 网址:http://www.techtimes.com/articles/118378/20151221/lgs-hom-bot-turbo-robot-vacuum-cleans-guards-home.htm

[42] About SixthSense 网址:http://www.pranavmistry.com/projects/sixthsense