Tag: Augmented Reality

Marcos Seefelder，软件工程师，以及 Daniel Duckworth，Google Research 的研究软件工程师 在选择场所时，我们经常遇到以下问题：这家餐厅是否适合约会的氛围？是否有好的户外座位？是否有足够的屏幕观看比赛？尽管照片和视频可能部分回答这些问题，但在无法亲自访问的情况下，它们无法取代感觉好像你在那里的体验。 交互式、照片逼真、多维度的沉浸式体验有望弥合这种差距，并重新创造空间的感觉和氛围，使用户能够自然和直观地找到他们需要的信息。为了帮助实现这一目标，Google 地图推出了 Immersive View，它使用机器学习（ML）和计算机视觉的先进技术，将数十亿个街景和航拍图像融合在一起，创建了一个丰富的数字模型。除此之外，它还在上面添加了有用的信息，例如天气、交通和场所的繁忙程度。Immersive View 提供了餐厅、咖啡馆和其他场所的室内视图，让用户可以虚拟地近距离观看，从而帮助他们自信地决定去哪里。 今天我们将描述 Immersive View 中提供这些室内视图的工作。我们基于神经放射场（NeRF），这是一种最先进的方法，用于融合照片以在神经网络中产生逼真的多维重建。我们描述了我们的 NeRF 创作流程，其中包括使用 DSLR 相机对空间进行自定义照片拍摄、图像处理和场景再现。我们利用 Alphabet 在这一领域最近的进展，设计了一种方法，其视觉保真度与之前的最新技术相匹配甚至超越。然后，这些模型被嵌入交互式的 360° 视频中，沿着策划的飞行路径，使它们可以在智能手机上使用。…