Перейти к основному содержимому

Runway выпускает world action model Praxis-1 для робототехники

Behzat AIworld-action-modelsroboticsembodied-aipolicy-evaluationrunway
Макросъёмка печатной платы с паяными соединениями, дорожками и поверхностно монтируемыми компонентами при направленном свете.

Runway представила Praxis-1, описываемую как world action model для робототехники. Этот релиз выводит Runway за пределы генерации видео в область embodied control, помещая линию видеомоделей непосредственно в стек роботизированных политик.

Swirling wisps of colored smoke against a black background

World action models переводят управление со скриптовых пайплайнов на обученное предсказание действий. Вместо написанных вручную конечных автоматов и фиксированной логики путевых точек политика предсказывает действия на основе обученного представления сцены и её динамики. Это меняет то, как роботизированные политики оцениваются и ограничиваются перед развёртыванием: оценка должна охватывать распределение предсказанных действий, а не только траектории, которые выдал бы скриптовый контроллер, а границы должны определяться над тем, что модель может выдать, а не над фиксированным набором команд. Практические вопросы — каково пространство действий, как предсказания ограничиваются при inference и какие доказаClose-up of an abstract pattern of rusty metal beams in an industrial design

Релиз выходит вместе с кластером финансирования робототехники и совместных предприятий в сфере embodied AI, включая заявленный раунд FieldAI на $700 млн при оценке в $10 млрд. Что остаётся неясным из предоставленных материалов — это пространство действий модели, обучающие данные, лицензирование и доступность; никаких бенчмарков или протокола оценки предоставлено не было.

Давайте поговорим!