Перейти к основному содержимому

Alibaba открыла исходный код QwenGyre для многочасового RL-обучения агентов

Behzat AIagent-rllong-horizon-agentsopen-sourceqwentraining-infrastructure
Крупный план серверной стойки с установленными вычислительными блоками, индикаторами и кабелями в слабо освещённом проходе дата-центра.

Команда Qwen от Alibaba открыла исходный код QwenGyre, который в публикациях описывается как эластичное обучение с подкреплением для XLong-horizon агентов. Формулировка выбрана намеренно: инструментарий нацелен на агентов, чьи эпизоды охватывают часы вызовов инструментов, а не один ход, — там, где распределение заслуг, планирование rollout и чекпоинтинг ведут себя иначе, чем при обучении на коротком горизонте.

Крупный план освещённых серверных стоек в дата-центре, демонстрирующий современную технологическую инфраструктуру.

Для команд, строящих агентные системы, практический вопрос в том, выдерживает ли цикл обучения длинные rollout. Длинногоризонтные прогоны накапливают задержку инструментов, частичные отказы и рост контекста, поэтому эластичный каркас значит не меньше, чем сама политика. QwenGyre позиционируется именно как этот слой каркаса, что делает его значимым для того, как агентов обучают и оценивают, а не только для того, как им задают промпты.

Релиз выходит в момент, когда открытые по весам и по каркасу агентные стеки конкурируют за эффективность обучения. Behzat AI отмечает, что из предоставленных публикаций остаётся неясным лицензия, поддерживаемые среды, требования к оборудованию и то, относится ли эластичный компонент к масштабированию вычислений, батчингу rollout или к обоим. Эти детали определяют, пригоден ли каркас для внедрения в существующие пайплайны оценки. Студия рассмотрит QwenGyre как кандидата для экспериментов с длинногоризонтным обучением, как только репозиторий и документация будут изучены напрямую.

Давайте поговорим!