Project Genie 结合街景图像,让AI世界模型锚定现实
谷歌将通用世界模型 Genie 与街景真实图像结合,使 AI 代理和机器人能在基于真实地点的虚拟环境中导航和交互,现已向订阅用户开放。
使用 Project Genie 和街景模拟现实世界的地方Genie 是我们的通用世界模型,能够生成多样化的交互式环境。自推出以来,Genie 已成为研究的基础工具,使智能体能够在复杂的虚拟环境中学习和推理,甚至帮助 Waymo 模拟超逼真的道路环境。
现在,我们向前迈出一大步,将 Genie 的生成能力与 Google 街景的真实图像连接起来,让我们的模型能够锚定在现实中。Genie 能力的这一扩展,可以为 AI 智能体或机器人提供一个虚拟环境,使其能够导航并与现实世界的复杂性进行交互。
今天,我们在实验原型 Project Genie 中推出了这种新的街景锚定功能。通过这次升级,您将能够利用真实世界的图像探索您最喜爱的地点,或者以创意方式重新想象它们。我们还将向全球更多人扩大 Project Genie 的访问权限。
选择“海洋世界”风格,即可在基于真实地点的场景中与鱼群一起潜水。街景:将您的世界锚定在真实地点现在,在 Project Genie 中创建富有想象力的世界时,您也可以将其基于真实地点。
只需点击地图图钉,选择美国的一个地点,并可选地为您的世界选择一种风格,例如“沙漠沙地”或“石器时代”。
然后,描述您的角色——比如您最喜欢的动物、漫画英雄,甚至是一个黏土动画怪物——Genie 将利用这些信息创建一个富有想象力的世界,其起始位置与街景的真实图像相关联。该功能由地图图像锚定技术驱动,开发者使用同样的技术通过街景创建令人惊叹的 AI 视觉效果。
想看看海底的金门大桥吗?选择“海洋世界”风格,即可在桥周围与鱼群一起潜水。或者,如果您想探索 20 世纪 20 年代德克萨斯州标志性的沃斯堡畜牧场可能是什么样子,选择“黑白电影”风格,就能看到一个充满酒吧、老爷车和贸易站的世界。
Project Genie 中的街景图像目前适用于美国的地点,并计划随着时间的推移扩展到更多地方。
Project Genie:现已与 Google AI Ultra 一同推出从今天开始,Project Genie(包括新的街景功能)将逐步向全球所有符合条件的 Google AI Ultra 200 美元订阅用户(18 岁以上)推出。
立即尝试使用 Project Genie 进行创作。Project Genie 仍然是 Google Labs 中的实验性研究原型,因此我们正在幕后努力,使细节更加清晰和准确。您可以在我们的网站上了解更多关于我们的进展和当前限制的信息。