李嘉诚和腾讯投资的Meta 2开始预订,还没有发货,据说定位的延时超过100毫秒,显示部分清晰度一般,而且还需要一台PC连着,用户预定等了一年半还是没有拿到! 其他的MR公司的眼镜也都停留在展会演示品阶段。 现在,这些都无所谓了,过去大家体验不到的神秘兮兮的混合现实眼镜已经向我们打开了大门。 因为任何一个人,利用开源的HoloKit的算法和硬件,不到两百块钱可以搞出世界上顶尖的混合现实眼镜。 这让很多人不得不焦虑。
(咦,开奖,上面的东西看起来好熟悉) 为什么有人要激动? 来说一下我的用户体验,我体验之后,说了大概十五个“我操,太牛逼了”。 其实用了HoloKit之后表示震惊的不止是我,还有斯坦福光场显示专家 Gordon Wetzstein教授,甚至是谷歌Project Tango的创始人Johnny Lee。 Johnny Lee of Google Project Tango 连Youtube第一网红Casey都拍手叫好! Casey Neistat using Holokit in New York City, May 24 2017 来看看这段视频感受一下:
把增强现实产品行业水平前进了至少一年 先给一张表格对比HoloKit和其他产品的优劣。 (这么算 FOV : h = 30 deg, v = 17.5 deg for hololens. 2 * atan(sqrt((2 * tan(h degree /2))^2 + (2 * tan(v degree /2))^2) / 2) to degree) 交互部分 交互外设支持:你能想到的能连上手机的东西,都能做交互。 比如说一个蓝牙耳机的音量键 + 你头部指向中心的光标,就可以做几乎等价于HoloLens 主要交互模式。 比如说任意一个蓝牙控制器($10以下),都能做交互。 比如说另外一个手机也能做控制器,还能实现了3自由度的交互呢。 下图中这两人一个用手柄,一个用手机做交互。其实效果都是一样的。是不是很便宜就实现了很多很科幻的效果?
手势识别 最简单的方式:我们可以装个 leap motion上去也实现了黑科技手势识别。 黑科技的方式:利用现有普通手机的单目摄像头做手势识别,不需要额外硬件。这个目前有很多库都能用,一个比较好的是 manomotion。 感知部分 感知部分是这个项目中最高科技的部分。 HoloKit采用基于手机惯性传感器和相机的传感器融合的里程计定位(VINS) 来实现Inside-out tracking (由内向外定位)跟踪。目前采用了香港科技大学沈老师领导的实验室今年最新的论文的技术,这个黑科技是真实的(在硅谷密探微信公众号后台回复“mr”获得论文链接和代码实现)。 以下是来自胡伯涛的评论: Meta 2 的位置跟踪烂到我已经不想说什么了。跳过。 HoloLens 比我们的效果好些,延时低,鲁棒,因为它有很多相机(4个)+ 一个HPU专用电路做定位。但正是由于特殊的芯片导致其成本居高不下的原因。 Tango 的效果不错,所以我们做了认真对比。下面是我们和Tango的对比。下图可以看出我们的loop closure可以把偏移修回来。 下图可以看出在办公室跑了几圈以后,Tango的飘逸已经修不回来,我们还能修正回来。 结论是基于Tango的专用硬件的效果的大体差不多,Tango精度比我们好一点的,我们长期的定位效果好点。 HoloKit vs ARKit Apple 6月5日,发了 ARKit 这个事。所以昨天下载了iOS 11 beta,做了一个简单对比。 (责任编辑:本港台直播) |