科技魔方

8th Wall发布WebAR开发生成式AI工具

AR/VR

2023年08月31日

  Niantic旗下的WebAR开发商8th Wall日前宣布与Inworld AI和OpenAI合作,并引入全新的生成式人工智能开发工具。通过引入GenAI模块,8th Wall希望帮助开发者更轻松构建AR体验。同时,8th Wall为开发者介绍了两个示例项目。

  据介绍,引入的两个GenAI模块包括Inworld AI的集成模块和OpenAI的集成模块,目标是帮助8th Wall开发者更容易、更直观地集成现有的人工智能技术。其中,Inworld AI的集成允许开发者在AR项目中添加交互式AI驱动角色。OpenAI的模块则允许开发者更容易地为用户添加ChatGPT和DALL-E,从而轻松地在AR世界中生成项目。

  Inworld的角色引擎

  Inworld是一项强大的GenAI技术,可以开发者为WebAR体验注入逼真的AI驱动角色。8th Wall表示,他们与Inworld合作创建了Inworld AI集成模块以及一个示例项目。

  所述模块允许开发者将Inworld的AI觉得与8th wall的工具结合起来,并提供全新的交互式体验。了Inworld提供的“大脑”,AI角色可以模仿人类的所有表情,这意味着每次的对话都可以不同。

  开发者现在可以将相关角色纳入到自己的8th wall体验之中,无需服务器配置或令牌认证工作的复杂性。一旦添加到项目中,模块就会负责后端工作,这意味着开发者只需输入API密钥即可开始。

  另外,团队提供了一个名为《Rainbow Crunchies》的示例项目,从而帮助开发者测试基于AI的交互。

  8th wall表示:“随着混合现实的未来逐渐成形,像Inworld这样的人工智能角色将成为构建虚拟世界的关键组成,并可以为用户提供跨数字空间互动的无限可能性。”

  OpenAI的集成模块

  8th wall同时引入了新的开发工具,利用OpenAI的DALL-E和ChatGPT的强大功能进行图像生成和人工智能文本聊天。

  就其本身而言,OpenAI的DALL-E是一个功能强大的GenAI模型,可以根据用户的文本提示创建非常详细和有创意的图像。当DALL-E与WebAR相结合时,开发者可以使用文本到图像的提示来创建体验,将创造力置于用户的控制之下。

  同样,ChatGPT允许开发者通过实时理解和响应用户输入来创建个性化和交互式的WebAR体验。8th wall表示,开发者现在可以使用这种类型的交互来与WebAR角色开发基于文本的对话,并与之协作。

  团队同时提供了一个相关示例项目,并允许开发者使用DALL-E生成纹理并将其应用于AR对象。

  团队表示:“对于将生成式人工智能集成到增强现实,最令人兴奋的是,它使得每个用户都能成为他们数字世界的建筑师。他们不再是被动地消费内容,而是积极地创造内容,并且可以用想象力塑造自己的体验。”

+1

来源:映维网

延展资讯