增强现实技术实现虚拟化家电

发布时间:2009-11-30 14:33    发布者:bakedham
关键词: 家电
得益于增强现实(AR,augmented reality)技术的发展,在不久的将来,科幻作品中所描绘的情景将有可能变为现实(见图1)。AR技术诞生于上世纪90年代前半期,现已广泛应用于电影及电视节目等。例如,通过合成的背景影像使得身在演播室的主持人看上去就像真的置身于大自然一般。除了电视领域以外,AR技术在夜视仪及战斗机飞行员使用的标靶显示等军事应用中也取得较大发展,并在2年前被实际应用于医疗行业。

1.jpg


        由此可见,AR技术将会在不久之后深入人们的日常生活。目前,一方面,图像处理算法越发精炼,所需的运算量也大为减少;另一方面,微处理器及图形处理单元 (GPU)的性能也得到了飞跃性的提高。以开发了面向AR技术的免费软件ARToolkit C语言程序库而知名的日本奈良先端科学技术大学(NAIST)教授加藤博一表示:“现在iPhone的处理能力已经可以与上世纪90年代的工作站相媲美。”

        首款消费类AR产品可能会是手机产品,然后,AR技术将在几年内扩展至家电领域,给人们的日常生活带来翻天覆地的变化。未来,人们在报刊杂志等纸媒体上也能看到视频内容,比如早报上来不及刊登的最新消息可以通过动态视频的方式进行展示;驾车时,标识目的地的箭头也可以在前方的道路上动态显示,车载导航仪不再需要专用的显示屏;家电产品将不再提供印刷版的使用说明书,而是由产品自身根据用户需要以视频的方式来显示相应的操作方法;衣服无需实际试穿,只要站在镜子前面就能看到试穿后的效果;电视等播放影像的家电也将从屋内消失,取而代之的是贴在墙壁上的二维代码,只需戴上专用眼镜就能看到壁挂式电视。

AR:以真实信息为前提

        AR技术是一种通过在人们日常看到、听到或触摸到的现实世界信息上实时地叠加一些经过计算机加工处理过的信息,以扩展或增强人们的感觉,给人们的活动提供辅助支持的技术。

        虚拟现实(VR,virtual reality)技术在1990年前后曾备受关注。AR技术与VR技术之间最根本的差别在于真实信息与虚拟信息的混合比例不同(见图2)。VR是将人类的视觉等实际信息全部替换为计算机图形(CG,Computer Graphics)等虚拟信息,而AR则是以真实信息为前提,在其基础上附加虚拟信息。在AR技术中,虚拟信息所占的比例较小。

2.jpg


        也有一部分研究人员通过其它标准来定义AR技术。NAIST大学的加藤博一教授表示:“对于用户来说,AR技术是一种便利、快速且安全的技术。”也就是说,与如何叠加虚拟信息相比,更为重要的是技术为人类活动所提供的具体支持。

结合五感传感器的信息

        要在实际应用中使用AR技术,还需要由计算机、各种传感器(作为计算机的视觉、触觉及其它感官)和用来输出加工信息的显示屏等组成的AR接口设备。通过采用不同的传感器和输出设备,并利用不同方式进行加工信息与真实信息的叠加,AR技术可被广泛应用于多种领域。

        日本Tonchidot(顿智)公司CEO井口尊仁表示,通过将来自PC及互联网的信息与人们的实际所见进行叠加,可以在现实空间中产生新的通讯方式。比如,如果将红外或MRI(核磁共振成像)系统拍摄的肉眼看不见的人体影像叠加到实际可见的人体上,那么就可以透视人体,清晰地看到内部的血管、内脏等。在日常生活中,电器等设备的按钮上则可以叠加显示关于该按钮功能的详细解释。

        触觉方面的AR技术已应用于相应产品中,即数码相机的防抖功能。该功能可用于检测用户拍摄时手的振动,并及时对光学镜头及图像进行相应的校正处理。此外,通过手指点击触摸屏所产生的振动来反馈触觉的功能也是AR技术的一种应用。通常情况下,使用者点击触摸屏时的位置是否正确是通过眼睛来判断的,但这对于盲人来说很难实现,如果可以根据振动来分辨触摸位置是否正确,那么就可以用手来代替眼睛,实现同样的功能。

        如果同声传译也无需人的介入,只通过电脑即可实现的话,那么AR技术就相当于强化了人的听觉及语言能力。大阪大学信息科学研究科生物信息专业的前田太郎教授还开发了前庭(平衡)感觉方面的AR技术,可以控制人的行走,使行人能够在无意识的状态下避开汽车。

视觉AR的开发先行一步

        开发工作较为领先的是与视觉相关的AR接口(见图3)。根据影像输出设备的不同,此类AR接口可分为四大类:PC显示器、手机、眼镜型头戴显示器 (HMD,head mounted display)、投影仪。这四类AR接口中都集成了用作传感器的摄像头,并具有一定的图像处理功能。

        其中,PC显示器将来有可能具备目前的梳妆镜功能。东京大学信息学科的历本纯一教授表示:“显示器可以用作具有AR功能的镜子。通过在镜子中的影像上叠加一些加工信息,即可以模拟出化妆或试穿某件衣服后的效果,甚至还可以将自己的高尔夫挥杆动作与Tiger Woods的动作进行比较。”

        而手机则是现在最接近普及的AR接口。大多数多功能手机中都已经集成了摄像头、GPS、地磁传感器及加速度传感器等,因此,现在很多厂商都正在开发面向这些功能的软件,用来在位置信息的基础上叠加来自互联网的各种相关信息,并显示到终端屏幕上。目前可使用的服务包括日本Mapion公司的DGRadar与澳大利亚Mobilizy公司的Wikitude(见图4)。

3.jpg


        上述面向手机的应用主要是根据用户所在位置的相关信息与手机摄像头所拍摄的景象来合成相关信息。虽然这些合成的信息仍然通过互联网获得,但其与以往通过搜索引擎获得信息的方式已大为不同:用户无需使用键盘或鼠标来进行网络搜索,只有那些与用户当前位置相关的信息才会被显示在屏幕上。

强化视觉效果

        如果HMD与投影仪等AR接口能够获得广泛应用,那么其所带来的影响将超过显示屏与手机,为人们的生活带来完全不同的体验(见图5)。

4.jpg


        HMD不仅能够实现PC显示器与手机的所有功能,而且还可以展示出更为直观的视觉效果。但是,开发HMD需要采用非常先进的技术。对日常生活中可使用的HMD的开发工作刚刚起步,要想实现易于使用的实际产品尚需一段时日。

        投影仪AR接口的实现相对较为容易。许多系统都可以在实际的拍摄对象上直接叠加虚拟影像。目前已有相关产品实际应用于医疗领域。美国Luminetx公司的VeinViewer可将红外摄像头所拍摄的静脉图像经过图像处理加工后再投影到人手上。庆应义塾大学媒体外观设计研究科教授稻见昌彦表示:“采用该产品后,即使是那些经验不足的护士也可以很容易地找到静脉位置,从而能够减少操作失误。”

利用AR接口整合家电

        这些AR技术将会大大改变未来的家电形态。Tonchidot公司的井口尊仁认为,随着AR的普及,家电产品将会逐渐被取代而消失。他表示:“按钮等家电接口完全可以采用AR接口来代替,而HDD录像机等设备的存储功能也可以用云计算来代替。”说消失或许过于夸张,但家电的机箱外壳可能真的将不复存在。

        上述预测中的关键点在于真实信息与虚拟信息的混合比例(见图7)。如前所述,与VR技术相比,AR中真实信息的比例较高,但某些方面虚拟内容的比例可能会很高。

5.jpg

        具体来说,AR技术最初应用于家电时,其可能只是用于显示附加信息,以取代产品的使用说明书。但是,随着AR技术越来越易于使用,在叠加信息中,作为基础的真实信息的重要性会降低。也就是说,家电硬件接口的作用会越来越小。比如,不光是电视的按钮,就连电视的显示功能也可以利用AR接口来实现。庆应义塾大学的稻见昌彦表示:“AR技术将会实现以往硬件接口的虚拟化。”

首先从游戏开始

        在2009年电子娱乐展览会“Electronic Entertainment Expo(E3)”上,索尼计算机娱乐公司(SCE)及微软公司均展示了与AR相关的技术,而麻省理工学院(MIT)媒体实验室等也正在进行AR技术的开发,从这些实际进展中可以看出,家电硬件的逐渐消失并不是荒诞无稽的预测(见图8)。

6.jpg


        具体来说,SCE公司在E3展会上进行了游戏控制器的演示,可以通过AR技术在控制器的位置上重叠显示网球拍的影像。与实际具有网球拍形状的遥控器相比,AR技术大大缩小了硬件的体积。SCE计划于2010年春推出该款产品。
微软公司也展示了其全新的游戏交互系统Project NATAL。该系统无需使用遥控器,仅通过游戏者的不同动作就可以控制游戏。它们都将显示屏用作AR接口。微软公司将于2010年推出该系统。

房间内所有家电的虚拟化

        在家电接口的虚拟化方面,还有更先进的开发实例,这就是在2009年8月举办的CG学会“SIGGRAPH 2009”上,由MIT媒体实验室、东京大学、庆应义塾大学等共同发布的CRISTAL(control of remotely interfaced systems using touch-based actions in living spaces)系统。这套系统实现了整个房间内所有家电的虚拟化,并且可以实现对家电的操作。

        CRISTAL通过安装在天花板的摄像头与投影仪在白色的桌面上投影出整个房间的俯视影像。摄像头可以检测到用户触摸各家电图像的动作,并根据动作控制相应的家电。也就是说,投影在桌面上的家电产品的图像相当于PC屏幕上的图标,通过点击便可以执行操作。庆应义塾大学的稻见昌彦表示:“目前为止,AR技术只是用于叠加影像,但CRISTAL则可以通过处理后的影像来控制现实中的设备。”

手指成为取景器

        在基于投影仪的AR接口方面,使用实例有MIT媒体实验室于2009年2月发布的Sixth Sense。该系统由挂在用户脖子上的小型投影仪、摄像头和放在用户口袋中的手机、耳机及有颜色的指套组成。指套的排列形状是AR的标识,决定了动作的种类及要叠加的信息。系统总成本仅为350美元。

        例如,当用户用手指框住一处美丽的风景时,此时指套的排列形状会使系统处于拍摄模式,手指围成的方框就是相机的取景框,系统会自动按下快门,完成拍照。另外,当用户将手掌伸到投影仪下面时,手上便会显示手机键盘,摄像头能够检测出哪些键被按下,并进行手机拨号。相机、手机及其它功能都通过AR接口实现,用户的手就可以用作统一的接口。

作者:《日经电子》记者 野泽哲生    来源:电子设计应用2009年第11期
本文地址:https://www.eechina.com/thread-6184-1-1.html     【打印本页】

本站部分文章为转载或网友发布,目的在于传递和分享信息,并不代表本网赞同其观点和对其真实性负责;文章版权归原作者及原出处所有,如涉及作品内容、版权和其它问题,我们将根据著作权人的要求,第一时间更正或删除。
您需要登录后才可以发表评论 登录 | 立即注册

厂商推荐

相关视频

关于我们  -  服务条款  -  使用指南  -  站点地图  -  友情链接  -  联系我们
电子工程网 © 版权所有   京ICP备16069177号 | 京公网安备11010502021702
快速回复 返回顶部 返回列表