Dionysios Satikidis 在玩《FIFA 19》的时候意识到可以将模拟足球游戏的真实性应用于机器人训练。
作为 AI 和自主系统领域的专家,在德国工业控制和自动化公司 Festo 工作的 Satikidis 相信,游戏与机器人的世界将产生交集。
在德国埃斯林根市公司总部工作的 Satikidis 表示:“我一直都热衷于技术和游戏。我和我周围的同事相信,未来我们可能需要使用游戏工具来创造自主机器人。”
同事 Jan Seyler 和 Dimitrios Lagamtzis 赞同他的观点。Jan Seyler 是 Festo 的高级控制和分析主管,Dimitrios Lagamtzis 于 2019 年加入 Festo。
Satikidis 和他的同事们已经开始密切关注 NVIDIA 并对建立在三维设计和仿真平台 NVIDIA Omniverse 上的机器人模拟应用和合成数据生成工具 —— Isaac Sim 越来越感兴趣。
最后,他们已经不满足于作壁上观了。
Satikidis 表示:“我联系了 NVIDIA 机器人研究高级总监 Dieter Fox ,通过电话询问了他们是否愿意与我们合作。”
在这之后,两家公司真正开始了合作。
完成从模拟到现实的挑战
Satikidis 和 Festo 的一个小团队目前正在开发用于机器人自动化的 AI。这家机器人硬件和气动装置制造商正在向 AI 模拟领域进军并希望使用这项技术来开发未来的产品。
Festo 使用 Isaac Sim 为公司的协作机器人(cobots)开发技能。这项工作需要建立机器人对环境、人类伙伴和任务的意识。
公司实验室正专注于缩小模拟和现实世界中的机械臂之间的差距,开发能够提高机器人真实感知的模拟环境。
为了建立机器人的感知,Festo 在 Omniverse Replicator 生成的合成数据上训练 AI 模型。
Satikidis 表示:“Festo 正在研发自己的协作机器人并计划于 2023 年在欧洲出货。”
将 Cortex 应用于自动化
Festo 使用 Isaac Sim 中的 Isaac Cortex 工具来简化协作机器人技能的编程。Cortex 框架可以协调 Isaac 工具并将它们组合成一个聚合的机器人系统,用于控制 Omniverse 中的虚拟机器人和现实世界中的物理机器人。
NVIDIA 系统软件总监 Nathan Ratliff 在最近的 GTC 演讲中表示:“我们的目标是让具有任务意识的机器人的编程,变得像游戏 AI 编程那样简单。”
Isaac Sim 是一个能够为机器人模拟提供各种工具的模拟套件。它支持传感器模拟、合成数据生成、虚拟现实世界呈现、机器人建模等诸多功能。
Omniverse 平台及其 Isaac Sim 工具彻底改变了 Festo。
Satikidis 表示:“我们现在可以将电子游戏呈现给现实世界中的机器人,这真是令人难以置信。”