RecodeX 重构消息,TwelveLabs于6日发布生成式模型Pegasus 1.6,该模型面向第一人称(自我中心)视角视频的理解与分析。公司介绍,模型可将操作动作与场景信息结构化为文本,用于机器人及物理AI视频的分类与审核。
Pegasus 1.6能够区分操作步骤以及手与物体的交互,并附带时间信息,同时生成描述空间关系和场景语境的句子。该模型还具备评估视频清晰度、构图与稳定性以筛选待审核内容的功能,并支持自然语言检索。TwelveLabs列举了烹饪、工厂装配和远程机器人操作等应用场景。
RecodeX 重构消息,TwelveLabs于6日发布生成式模型Pegasus 1.6,该模型面向第一人称(自我中心)视角视频的理解与分析。公司介绍,模型可将操作动作与场景信息结构化为文本,用于机器人及物理AI视频的分类与审核。
Pegasus 1.6能够区分操作步骤以及手与物体的交互,并附带时间信息,同时生成描述空间关系和场景语境的句子。该模型还具备评估视频清晰度、构图与稳定性以筛选待审核内容的功能,并支持自然语言检索。TwelveLabs列举了烹饪、工厂装配和远程机器人操作等应用场景。