神级开源混合现实眼镜！200块视觉效果超HoloLens

LotusRatel

　　昨天，苹果的发布会一个纸板做的增强/混合现实眼镜出尽了风头。该产品甚至可以称之为送给了AR行业这份大礼，将改变整个AR/MR和VR行业的规则，森森的有一种AR/MR界的普罗米修斯的感觉！！



纽约地铁实拍图



　　众所周知，微软HoloLens商业版卖39188人民币，而开发版卖23488人民币，而且还限量！而这个研究团队用不到两百人民币的成本，超过了微软HoloLens的视觉效果！

　　没错，Holokit不要39188，只要两百块！！！







　　就是这个看起来丑丑的纸板HoloKit眼镜，让整个增强现实行业面临洗牌，数百家VR/AR/MR公司面临转型，但成千上万的开发者将因此受益。



　　2017年6月6日的这个夜晚，这个眼镜也会让无数人激动或者焦虑的睡不着觉，增强现实开启了新纪元。焦虑者之中会有全球几十家增强现实和虚拟现实公司，包括英特尔、微软，谷歌、Facebook、Meta、Magic Leap等一大波VR/AR领域投入重金的科技及巨头。

　　激动的会是国内所有的VR开发者，创业者、厂商和代工厂，和所有想做AR/MR却无从下手的开发者、创业者、厂商和代工厂。

　　而如今，同样影响的还有苹果ARKit，ARKit这个昨天发布会上最容易被人忽视，却是昨天苹果发布会上最革命性的产品之一。



　　简单的说，ARKit基本实现了单目加惯性测量元件(IMU)的定位算法可以提供的大部分功能，凭借广泛的硬件覆盖率，iOS有望有活力的AR内容平台，类似PokeMon GO类的AR游戏体验肯定有质的飞跃，一大波真AR游戏应用可能会到来。

　　苹果封装了这些定位算法并提供给开发者调用，做的事情其实和HoloKit一样，所以并不会对苹果AR策略有影响。但根据目前通过粗略的与苹果的iOS 11测试版对比评测发现，HoloKit的VINS算法应该也能基本达到ARKit官方展示的效果，所以安卓厂商可能可以直接利用修改HoloKit开源的算法做到比苹果ARKit更牛逼！

　　为什么有人要激动？

　　其实小编感到震惊是毋庸置疑的，毕竟也只是看看。但在用了HoloKit之后，斯坦福光场显示专家 Gordon Wetzstein教授，甚至是谷歌Project Tango的创始人Johnny Lee一致被它给折服，这简直让人惊呆了！







　　交互部分

　　交互外设支持：你能想到的能连上手机的东西，都能做交互。

　　下图中这两人一个用手柄，一个用手机做交互。其实效果都是一样的。是不是很便宜就实现了很多很科幻的效果？





　　手势识别

　　最简单的方式：我们可以装个 leap motion上去也实现了黑科技手势识别。

　　黑科技的方式：利用现有普通手机的单目摄像头做手势识别，不需要额外硬件。这个目前有很多库都能用，一个比较好的是 manomotion。





　　感知部分

　　感知部分是这个项目中最高科技的部分。

　　HoloKit采用基于手机惯性传感器和相机的传感器融合的里程计定位(VINS) 来实现Inside-out tracking （由内向外定位）跟踪。目前采用了香港科技大学沈老师领导的实验室今年最新的论文的技术，这个黑科技是真实的。

　　下图可以看出我们的loop closure可以把偏移修回来。



　　下图可以看出在办公室跑了几圈以后，Tango的飘逸已经修不回来，我们还能修正回来。



　　结论是基于Tango的专用硬件的效果的大体差不多，Tango精度比我们好一点的，我们长期的定位效果好点。

　　简单的说，HoloKit凭着一己之力，至少把MR行业的普及硬生生往前推进了一年，而且将增强/混合现实的火种传递给了所有的普通开发者！！！

　　你不需要买一个几万块的HoloLens，就可以做出超牛逼的混合现实项目！！！而我的感受是在学神把作业让你抄，所以学渣也能及格了！！