SkillFeeder › 全部 Skill › Agent工具链 › cosmos3-inference-action-inverse-dynamics

从视频中反推自动驾驶或机器人每步的9维位姿变化轨迹

cosmos3-inference-action-inverse-dynamics

cosmos3-inference-action-inverse-dynamics 是 SkillFeeder 收录的Agent Skill,来自 GitHub 仓库 NVIDIA/cosmos-framework,★ 631。从视频中反推自动驾驶或机器人每步的9维位姿变化轨迹。适合自动驾驶/机器人研究员。场景是Agent工具链 · Agent运行时。能做的事包括输出每帧对应的9维位姿增量序列、支持自动驾驶前视视频和LeRobot机器人片段、集成vLLM-Omni、SGLang与TensorRT-LLM推理后端。打开 GitHub 自行安装。

打开 GitHub

仓库
NVIDIA/cosmos-framework
仓库星标
★ 631
场景
Agent工具链 · Agent运行时
适合
自动驾驶/机器人研究员
类型
Skill

能做什么

原文简介

Predict the action trajectory behind an observed video with the Cosmos3 action models (inverse dynamics): an autonomous-vehicle ego clip or a LeRobot robot episode in, a per-step 9D pose-delta trajectory out, through diffusers in-process, the cosmos_framework PyTorch entrypoint, vLLM-Omni, SGLang or TensorRT-LLM. Use when the user asks "recover the ego-motion / end-effector trajectory from this vi

同场景推荐