TGFC Lifestyle - Powered by Discuz! Board

标题: [业评] 转载：（科普）微软Hololense现场演示背后的广电级AR现实增强技术 [打印本页]

作者: finalx 时间: 2015-5-6 21:21 标题: 转载：（科普）微软Hololense现场演示背后的广电级AR现实增强技术

微软的”Hololens“现场演示非常有意思，如果演示的功能完全能实现在最终的商业版本中，并且价格适中，将为行业的AR应用打开一个低成本实现的途径，从而让更多人能够应用并体验到AR技术带来的便利。

但毕竟Hololense没有发布，所以我们转过来看这场Demo秀的AR究竟是如何实现的，呵呵，说出来这可能吓大家一跳，微软作秀可是用的数十万美金级别的广电AR技术，和Hololens的AR可没有半毛钱关系。（嗯，应该是做了联动整合）

秘密就在这位肩扛摄像机大叔的身上。

让我们来一个近景。

这个肩扛摄像机不简单，除了用了高端的电影级别RED 4K摄像机之外（微软就是有钱啊，其实这种场合Sony的高清ENG摄像机肯定够了），看到摄像机镜头下方肩扛支架上的像Kinect的方盒子没有？这可不是几千块钱的Kinect体感摄像头，这可是最新广电级的小型摄像机运动传感器，在一公斤不到重量下，这个传感器可以在30秒钟内对环境进行自动定位，综合采用光学图像识别、陀螺仪定位、红外探头等多种传感器，而且非常方便，可以应用用肩扛摄像机和斯坦尼康支架，传感延迟在1帧以内，目前是广电AR应用中最炙手可热的摄像机运动跟踪技术，可价钱也辣手啊，一套传感器+数据处理系统超过100万人民币！！

上个月在拉斯维加斯全美广播设备器材展（NAB 2015）上，我在虚拟演播室厂商Vizrt展位上拍到的RED摄像机+肩扛传感器的照片。

当RED摄像机把高清信号传出来的时候，这可不会传给啥子Hololens处理器或者Windows 10电脑，因为这可是广电标准的无压缩3G带宽的1080P SDI数字基带信号啊，能吃这种信号并进行实时AR图形叠加的也只有广电级实时图形渲染器，这种渲染器也不便宜，一套大约在40万人民币左右，这种图形渲染器会自带三维图形制作和动画编辑系统，可以把这场Demo秀的AR图形和动画事先做好，放入一个和实际场景对应的虚拟三维场景中，然后根据传感器的定位数据，把AR图形动态”叠加“在视频画面上，实时合成好的画面（大约有2~3帧的延迟）会返送给摄像机上的监视器和现场大屏幕。

所以，我们可以知道，除了Hololens的佩戴者，现场观众是看不到舞台上的AR图形的，他们只能从现场大屏幕上看到AR图形，至于主持人嘛，他只是在演戏罢了。下面截图看到右边大屏幕没有？

另外，我在以前的帖子里说过，Hololens玩游戏体验不一定好的原因是，AR图形会遮挡你的手指，因为AR图形一定是在视频的最外层。尽管微软这个秀之前一定费劲心机，彩排良久，避免演示人出现在AR图形的前面，但下面还是稍微”穿帮“了一下，你可以看到主持人的手被应该位于主持人后方的机器人AR图形挡住了，所以AR技术在现阶段，并不能像在科幻电影中那样，和实景那么融洽在一起，还是利用视觉错觉而已。

不过在这次的现场演示中，我们可以看到，AR图形和演示人之间的可以互动，我猜想Hololens是用小型投影机把AR图形投射到Hololens外侧的墨镜片上，这时候通过降低亮度，演示人可以通过AR图形和墨镜片，看到自己的手指，从而去和AR图形进行互动，另外，HoloLens也需要能够像Kinect一样，识别手部的动作和位置，我猜这时候Hololens会生成一个虚拟的手掌，在眼镜内的投影中随手部动作而移动，在AR图形上去选择触发或拖动（我猜虚拟手掌也会像Kinect识别的手掌一样有一定的延迟）。

这时候的触发和拖动信号，Hololens一定可以用无线信号发射出来，传给广电的AR图形渲染引擎，所以，在这个秀里，我们也看到演示人的动作也触发了摄像机信号里的AR图形进行联动，这从另外一个方面说明了，将来，两个Hololens佩戴者对同一个AR虚拟共同操作的可能性，只要两个眼镜里三维场景是同步的。

总体来说，现场演示的AR图形效果还是比较小儿科，我怀疑和Hololens内置小型处理器的处理能力有关，至于秀当中用到的广电级别渲染器，渲染这种场景当然毫无压力，下面是NAB 2015年一家全球领先的广电级渲染器的AR渲染效果，把Hololens甩开18条街啊。

http://v.youku.com/v_show/id_XOTM4NDU3OTEy.html

视频里面也有类似微软秀里，AR图形附着在一个支架上的效果，不过这是利用演播室周围悬挂的一圈红外动作捕捉探头来实现的，这又是一百多万的设备，广电东西就是死贵啊。

所以总体上，对Hololens还是非常期待的，几千大元的东东，可以作为入门级的AR设备，然后又跑在Windows 10的开放平台上，如果微软能把传感数据接口和内置摄像机信号接口开放，几个人的互联网演播室也能搞出上千万广电级虚拟植入演播室的效果，这岂不是草根革命？

作者: hqqttjiang 时间: 2015-5-6 22:31

舞美很多都用了这个吧
比如2010年的VGA颁奖晚会

你国的春晚更是任性

作者: cfqxd 时间: 2015-5-6 23:04

擦，这才是真正的酷，可惜是专业设备

作者: finalx 时间: 2015-5-6 23:30

引用:

原帖由 hqqttjiang 于 2015-5-6 22:31 发表
舞美很多都用了这个吧
比如2010年的VGA颁奖晚会

http://ww1.sinaim ...

"当RED摄像机把高清信号传出来的时候，这可不会传给啥子Hololens处理器或者Windows 10电脑，因为这可是广电标准的无压缩3G带宽的1080P SDI数字基带信号啊，能吃这种信号并进行实时AR图形叠加的也只有广电级实时图形渲染器，这种渲染器也不便宜，一套大约在40万人民币左右，这种图形渲染器会自带三维图形制作和动画编辑系统，可以把这场Demo秀的AR图形和动画事先做好，放入一个和实际场景对应的虚拟三维场景中，然后根据传感器的定位数据，把AR图形动态”叠加“在视频画面上，实时合成好的画面（大约有2~3帧的延迟）会返送给摄像机上的监视器和现场大屏幕。

所以，我们可以知道，除了Hololens的佩戴者，现场观众是看不到舞台上的AR图形的，他们只能从现场大屏幕上看到AR图形，至于主持人嘛，他只是在演戏罢了。下面截图看到右边大屏幕没有？"

如果是这样的话，这饼花的有点早，毕竟一颗atom能折腾到哪去。

作者: 鬼冢英吉 时间: 2015-5-7 06:11

posted by wap, platform: iPhone
所以说好多人看了那个演示就高潮了，其实你们看到的跟微软那玩意压根没什么关系

作者: fjwzht 时间: 2015-5-7 07:02

引用:

原帖由 鬼冢英吉 于 2015-5-7 06:11 发表
posted by wap, platform: iPhone
所以说好多人看了那个演示就高潮了，其实你们看到的跟微软那玩意压根没什么关系

那照这个说法，会后体验的那么多科技媒体和开发者都是照着脑补说瞎话，看来微软花的黑钱不少，能堵这么多人的嘴

作者: areyouready 时间: 2015-5-7 11:26

posted by wap, platform: iPhone
赌五毛最后成品出来落差极大，和肯奶一样。

作者: ggggfr 时间: 2015-5-7 13:15

posted by wap, platform: iPhone UC
surface（老版）natal哪个不是这样……
ar现实虚拟融合回带来怎样的改变在赛博朋克里文艺作品里已经描绘得够多了，大饼看得够够的了，微软每次宣传片都是科幻一样，再用成品把人拉回现实……

作者: west2046 时间: 2015-5-8 15:25

为什么都是喜欢用MJ出来喷?自知自明吗？233

作者: 很苦的熊 时间: 2015-5-8 15:33

看来还是大法老实的多.
也就一头带式显示器,加一个定位的陀螺仪之类的东西.
并且自己家的设备也量产了3代了,什么效果市场上也都明白.

作者: west2046 时间: 2015-5-8 18:41

引用:

原帖由 很苦的熊 于 2015-5-8 15:33 发表
看来还是大法老实的多.
也就一头带式显示器,加一个定位的陀螺仪之类的东西.
并且自己家的设备也量产了3代了,什么效果市场上也都明白.

索尼头戴显示器HMZ系列停产，Morpheus系列继续开发。HMZ系列从11年初代“HMZ-T1”以来便收到了广大用户的关注，如今画上句点不免让人感到惋惜。不过索尼并表示这是“选择与集中”的一个过程，之后将会继续进行“Project Morpheus”（Morpheus，与PS4联动的VR设备）。

作者: west2046 时间: 2015-5-8 18:45

欢迎光临 TGFC Lifestyle (http://tgfcer.com/)