混合现实让机器学习升级

混合现实(先生)是一种视觉增强技术，现有物体或景观的实时图像可以通过数字方式改变。任何玩过Pokémon Go!或者类似的游戏也知道，当角色出现在真正的地标旁边时，看着智能手机屏幕几乎会感觉像变魔术一样。

这种方法也可以应用于更严肃的活动，如想象一个新的建筑会是什么样子，一旦现有的结构被移除和树木增加。然而，这种数字删除被认为是计算密集型的，不能在移动设备上实时生成。

现在，大阪大学的研究人员已经展示了一种新的系统，可以在此帮助下更快地构建MR景观可视化深度学习．关键是用成千上万的标记图像训练算法，这样它就能更快地识别遮挡物，比如墙和栅栏。这允许将视图自动“语义分割”为保留元素和屏蔽其他元素。

该项目还定量测量了绿色视野指数(GVI)，这是指在当前或拟议布局中，包括植物和树木在内的绿化区域在一个人的视野中的比例。通讯作者Tomohiro Fukuda说:“我们能够在混合现实查看器中实现动态遮挡和绿色视图指数估计。”

实时视频被发送到语义分割服务器，结果被用于在移动设备上使用游戏引擎呈现最终视图。建议的结构和绿色植物可以显示，即使是在观看角度改变。第一作者大木户解释说:“我们评估了网速和延迟，以确保实时的MR渲染。”研究小组希望这项研究能帮助利益相关者了解GVI在城市规划中的重要性。

这项研究发表在先进的工程信息．