HoloLens共享MR视野的官⽅解决⽅案
当我们戴上VR头显或者HoloLens的时候,体验着⾝临其境的神奇效果,有时会⼤笑尖叫,有时会⼿舞⾜蹈,但是在旁观者看来,你只是在做着奇怪的⾏为,因为他们不知道你看见了什么。然⽽今天,微软取得了新突破,可以将HoloLens的内容带进现实中。
微软此次为开发者推出的⼯具名为Spectator View,让开发者可以向观众展⽰⾃⼰的应⽤。
MRC与Spectator View
由于HoloLens只能由⼀⼈佩戴,那么怎样才能拓开视野,将HoloLens⽤户和其他观众连接起来,让所有⼈都能看到同样的内容呢?为了解决这个问题,微软此前开发了混合现实捕捉技术(MRC),不论观众是1⼈还是100⼈,都能够共享HoloLens⽤户看到的第⼀⼈称全息内容。
MRC技术是内置到设备中的,可以随时使⽤,能够超级简单地捕捉⽤户在HoloLens中所看到的内容。但另⼀⽅⾯,该技术也存在⼀些不⾜。由于MRC直接内置在HoloLens中,因此对于其他设备参数具有⼀定的要求,例如相机规格、资源的捕捉和合成等。另外⼀点,还需要⽤户头部佩戴⼀台相机连接到HoloLens,所以即使轻微的头部运动也会导致相机晃动,最终的画⾯⾮常不稳定。
因此,微软此次开发了Spectator View Camera(观众视⾓相机)来解决这些问题。由于Spectator View C
amera不需要⽤户直接佩戴,因此不会受到⽤户头部运动的影响,画⾯稳定流畅,观众更加容易融⼊其中。
Spectator View(观众视⾓)设置
另外⼀个最重要的不同之处在于,MRC提供的共享影像是来⾃HoloLens⽤户所看到的第⼀⼈称视⾓。⽽Spectator View Camera可以展⽰给观众第三⼈称视⾓(如上图),不仅仅能让观众看到HoloLens⽤户所看到的实时画⾯,还能让这些观众看到HoloLens⽤户的⾏动,以及他们如何与混合现实内容进⾏交互。
Spectator View Camera如何⼯作?
通过下⾯的视频可以看到,Spectator View Camera设置完成后,观众看到的世界会变成什么样⼦。
正如你在视频中看到的,⼀台观众视⾓相机可以完成以下任务:
1.捕捉混合现实场景照⽚。
2.拍摄全息环境下的视频。
3.向观众直播全息内容。
怎么建⽴Spectator View Camera?
如何建⽴⾃⼰的Spectator View Camera呢?微软之前做发布会和演讲的时候将HoloLens的Demo展⽰给观
众,Spectator View Camera和发布会上的展⽰都是基于同样的技术实现的。
微软发布会上所⽤的设备
数码单反上⾯加装了HoloLens,以脚架固定。通过Wifi将图像、位置信息传输到PC,再由PC上的软件进⾏处理和合成。
Spectator View Camera
如上图所⽰,组装Spectator View Camera所需的硬件有:3D打印适配器、热靴固件、铝HoloLens⽀架、数码单反、三脚架。
所需软件包括:Blackmagic Capture Card SDK、Blackmagic Desktop Video Runtime、OpenCV 3.1、佳能SDK、Unity3D、Visual Studio 2015 Update 3。
⾸先,你需要有⼀些开发经验,才能去创建⼀个Spectator View Camera,任何可以运⾏HoloLens模拟器的PC都可以运⾏Spectator View。需要先进⾏硬件的安装、然后进⾏PC设置、相机设置等,查看GitHub和完整⽂档,可以了解详细的软硬件清单以及安装⽅法,各部件的价格在⽂档中也有相应的链接说明。
通过下⾯的视频可以简单了解⼤概的步骤。
1.准备好合适的硬件和带HDMI接⼝的数码单反。测试相机:
Canon 5D Mark III
Nikon D7200
GoPro Hero 4 Black
带有SDI to HDMI转换器的Blackmagic Design Production Camera 4K
2.⽤安装⽀架将HoloLens和相机连接起来。
3.安装好之后,将Spectator View Camera与PC连接,HoloLens可以通过Wifi与PC传输信息。
4.你的应⽤必须是⼀个共享全息体验。在HoloLens上,或者利⽤Windows通⽤平台在桌⾯上运⾏该应⽤。微软的在线教程Hologram 240通过六个章节的内容介绍了如何创造⼀个共享全息体验。
5.完成校准,保证HoloLens和你的相机对准。
wifi分享
6.准备好分享你的全息作品。
Spectator View能够将更⾼质量的全息内容展⽰给更多的观众,全息影像不再仅仅存在于HoloLens当中,⽇后混合现实开发者也将获得更多的思路,HoloLens将在各⾏各业产⽣更加⼴泛的影响⼒。
原⽂链接:
本⽂系极AR原创⽂章,转载请注明出处。
从VR到AR,⾏业资讯、产品测评、应⽤体验、深度点评,
让「极AR」告诉你什么才是未来!