本网页已闲置超过3分钟,按键盘任意键或点击空白处,即可回到网页

现实生活马里奥赛车与Microsoft Hololens增强现实护目镜的完美融合
发布时间:2020-08-31
分享到:
现实生活马里奥赛车与Microsoft Hololens增强现实护目镜的完美融合
发布时间:2020-08-31
分享到:

描述
看看这款增强现实赛车游戏,在其中您可以套上Microsoft Hololens,并在现实的卡丁车中放大赛道,拾取虚拟动力来提升卡丁车的速度或减慢比赛的速度(取决于动力) -向上)。


细节

首先,请欣赏Holokart演示视频,以便实际操作!这是Mario Kart的真实版本,您可以进入实体(而非虚拟)卡丁车,并穿上Microsoft Hololens增强现实护目镜。当您在赛道上奔跑时,您会看到可以通过全息照相收集的全息助力...而且由于我已将这些电子设备添加到卡丁车中,这些虚拟助力实际上可以增强现实的卡丁车速度,或减慢比赛速度(取决于您获得的动力)。
由于hackaday人群是一个知识分子,所以这里有一些有关该技术的幕后细节。

我已经了解到Microsoft Hololens出色地完成了一项工作,就是由内而外的SLAM(同时进行本地化和映射)。如果您不熟悉,这是来自自主机器人的概念,其中存在各种传感器,并且随着设备在周围移动,它会创建周围环境的地图并跟踪周围环境中的位置。Hololens使用可见光摄像头,内部测量单元以及结构化的红外光网格(以及红外摄像头),并结合了所有这些传感器返回的数据,以产生令人震惊的准确环境地图,尽管可能这些传感器流之一中的某些错误。为了最大化Hololens以“高速”(每小时10-15英里)跟踪其位置的能力,我们在轨道周围放置了海报板,上面贴有黑色矩形贴纸。这些标签的尖角是视觉SLAM算法用来跟踪运动的视觉“功能”。在最终的生产系统中,这些海报板将由汽车,赛车手,观众,方格旗的纸板站立架代替...符合赛车主题并具有目的(轨道装饰)的东西,不仅仅是为Hololens提供鲜明的功能,跟踪。这些纸板切口应尽可能为3维,因此IR灯和IR摄像机的栅格也具有良好的三维特征,可以进行检测。我相信,这些改进以及切换到Hololens 2并改善赛道上的照明条件,将大大减少或消除您在视频中看到的“滞后”,

我认为,该项目最酷的部分是现实卡丁车与虚拟Hololens游戏之间的互动。例如,如果您使用提升动力的动力(在演示视频中看到了赶上赶的芥末酱和芥末酱的“ jetpack”),那么卡丁车将加速一定的时间。同样,如果您放下障碍物(在演示中看到的保龄球瓶)而对手撞到障碍物,他们的卡丁车将停下来一会儿,使您在比赛中领先于他们。这是通过远程控制来完成的。现代电动卡丁车具有远程控制,场地可用于在发生事故时停止所有赛车手,或者根据驾驶员的能力减速或加速卡丁车。我实现的卡丁车系统使用的是433 Mhz OOK系统,该系统易于解码。 

剩下的问题是用户如何激活电源?我在卡丁车中添加了“激活加电”按钮。此按钮连接到带有wifi防护罩的arduino,因此当用户按下“激活”按钮时,它可以告诉游戏服务器。每个arduino均经过编程,以便知道它所在的卡丁车,而hololens单位也知道它们与哪个卡丁车相关,这是因为“游戏开始”过程涉及将Hololens指向卡丁车电子设备外壳背面的识别QR码。 。

最后,我应该解决一个常见问题。如果您用Google搜索“现实生活中的马里奥赛车”,您会发现其他人的一些项目。这些项目以及我想做的不同的事情。

1. 虚拟现实Mario Kart - Shapes大师(令人惊叹的混合媒体艺术与技术小组)这个完全美丽的项目使用虚拟现实的护目镜,因此您根本看不到现实世界的周围环境。就个人而言,我在虚拟现实的护目镜中容易感到恶心,因此我想对增强现实做类似的事情。另外,为了跟踪卡丁车,他们使用所谓的由外而内的跟踪,即在卡丁车上使用IR信标,在天花板上安装昂贵的摄像头网格,这是我上次在同一系统上报价时的6位订单项。Hololens采用了由内而外的跟踪功能,因此场馆只需支付头戴式耳机的费用,而无需单独的跟踪系统。仍然要明确地说,我对造型大师所做的事情非常尊重。

2. BattleKart-来自一家欧洲公司的创意项目,在天花板上使用投影仪网格,并使用与Masters of Shape相同的IR信标系统。由于该组使用投影仪,因此用户无需戴耳机。这使场地的活动更快(将耳机戴在人身上需要时间),尽管就个人而言,将物体投射到地面上的效果并不像Hololens那样令人兴奋。另外,从里到外的跟踪是预算中的6位数字的订单项,如果您使用Hololens,则可以将其删除。

3. HadoKart-在来自日本的这个项目中,用户佩戴Hololens设备,但在相当缓慢且不舒服的小型卡丁车中竞赛。观看娱乐贸易节目中的这段视频,了解我的意思。他们有一些促销视频,您会在YouTube上找到这些视频,这些视频似乎被人为加速,或者全息图看起来像是在后期制作中添加的。我真的很喜欢这个小组提出的一些游戏的概念,但是我想用更快,更舒适的卡丁车来实现。

4. Mushroom Rally和MariKart-我很犹豫将这些内容包括在此列表中,但是人们总是向我发送这些组的链接。这里的想法是,您穿上视频游戏角色的服装(例如“超级马里奥”),然后乘坐卡丁车。没有AR或VR ...没有助力设备...除了穿着服装赛车卡丁车外,没有其他游戏。我认为这听起来很有趣,我想尝试一下...但是我认为添加全息图和提速加速器是值得的。

加入微信技术交流群

技术交流,职业进阶

关注电路设计技能公众号

了解最新技术方案

加入电路城 QQ 交流群

与技术大牛交朋友

讨论