让AI模型成为GTA五星玩家,基于视觉的可编程智能体Octopus来了
电子游戏已经成为如今现实世界的模拟舞台,展现出无限可能。以游戏《侠盗猎车手》为例,在GTA的世界里,玩家可以以第一人称视角,在洛圣都当中经历丰富多彩的生活。连续的视频可以更进一步提高模型完成任务的性能,但如何高效地处理和理解连续视觉输入将成为进一步提升VLM性能的关键。
南洋理工发布视觉可编程智能体Octopus 干家务、玩游戏都拿手
南洋理工大学、清华大学等发布了一种名为Octopus的视觉可编程智能体,它通过在大量视觉输入和可执行代码的数据对的训练中学会了如何操控电子游戏的角色完成游戏任务,或者完成复杂的家务活动。Octopus具备规划推理和根据实时环境做出反馈的能力,能够理解真实世界并生成可执行代码来完成各种实际任务。这一研究对于实现大模型的具身智能化具有重要意义,为进一步探
Devin候补名单Waitlist申请入口 软件工程师编程AI助手详细使用方法教程指南
Devin是世界上第一款完全自主的AI软件工程师。具有长期推理和规划能力,可执行复杂工程任务,并与用户进行实时协作。要了解更多关于Devin的信息以及开始使用这款创新产品,请访问Devin官方网站。
Comate编程助手官网体验入口 百度AI代码生成工具使用指南方法教程
Comate编程助手是基于文心大模型,结合百度积累多年的编程现场大数据和外部优秀开源数据,为你生成更符合实际研发场景的优质代码。它可以帮助你快速理解代码、解答技术问题、智能生成代码块、优化代码、修复错误等。想要了解更多关于Comate编程助手的信息,欢迎访问Comate官方网站。