Microsoft представила Scope для проверки совместимости ПО с ИИ-агентами

Microsoft представила Scope — платформу с открытым исходным кодом для оценки того, насколько программное обеспечение подготовлено к работе с ИИ-агентами, которые пишут код. Инструмент построен на базе Kubernetes и предназначен для проверки поведения агентов в условиях, приближенных к реальным задачам.
Scope позволяет оценить, как агент взаимодействует с продуктом, выполняет поставленные задачи и реагирует на обратную связь. Такой подход помогает выявлять проблемы не только в самом агенте, но и в документации, интерфейсах и инструментах, с которыми он работает.
Что проверяет Scope
Анализ проводится по трём основным направлениям. Первое — документация и инструкции. Scope помогает находить повторяющиеся ошибки, неточности и неверные предположения в руководствах, предназначенных для ИИ-агентов.
Второе направление связано с обнаружением и использованием SDK. Инструмент проверяет, правильно ли агент выбирает нужные API и корректно ли выполняет их инициализацию. Третья область — работа с командной строкой и MCP-серверами, которые могут использоваться агентом для взаимодействия с внешними инструментами и средами.
Во время тестирования Scope фиксирует активность агента в реальном времени, сохраняет историю взаимодействий и делает снимки рабочей среды. Эти данные можно использовать для последующего анализа и поиска причин ошибок в процессе выполнения задач.
Поддерживаемые инструменты и лицензия
Платформа работает с GitHub Copilot, Claude Code, а также с Visual Studio Code при поддержке Copilot. Scope распространяется по лицензии MIT, поэтому его разрешено использовать и расширять в собственных проектах.
Microsoft отмечает, что самостоятельное развёртывание даёт командам возможность анализировать рабочие процессы без передачи исходного кода и данных о выполнении задач внешним сервисам. Это может быть особенно важно для компаний, которые тестируют ИИ-агентов внутри закрытой инфраструктуры.


