Перейти к основному содержимому

Anthropic: узкое место в надзоре за агентами — человеческое внимание

Behzat AIagent-supervisionhuman-in-the-loopagent-operationsenterprise-aiattention-bottleneck
Крупный план серверной стойки с кабелями и мигающими индикаторами состояния в дата-центре

Fortune сообщает, что Anthropic описала армию Claudes, каждый из которых требует человеческого внимания. Такая формулировка определяет внимание, а не inference, как дефицитный ресурс в работе агентов. Это важно, потому что большинство агентных программ недооценивают мощность надзора: ограничение на то, сколько агентов может работать одновременно, часто определяется числом людей, доступных для проверки, исправления и утверждения их действий, а не стоимостью или скоростью вызовов модели.

Крупный план освещённых серверных стоек в дата-центре, стоковое фото

Наблюдение следует за волной корпоративных отчётов о том, что внедрение опережает доверие. Команды развёртывают агентов быстрее, чем выстраивают процессы проверки, пути эскалации и аудиторские следы, необходимые для надзора за ними. Когда надзор считается второстепенным, пропускная способность агентов ограничивается вниманием нескольких операторов, а качество падает по мере роста очередей. Операционное решение — не лучшая модель, а дизайн надзора: чёткое распределение ответственности, ограниченная автономия, структурированные передачи и инструментарий, который выводит только те решения, где нужен человек.

Для агентных программ практический вывод — закладывать надзор в бюджет как первостепенную статью затрат. Это означает измерение нагрузки внимания на агента, определение порогов эскалации и проектирование интерфейсов, позволяющих одному оператору курировать многих агентов без постоянного переключения контекста. Дефицитный ресурс — человеческое суждение, и системы, которые его уважают, масштабируются дальше, чем те, которые этого не делают.

Давайте поговорим!