Безопасность, оценка и контроль Open-source

Microsoft Agent Governance Toolkit

Open-source toolkit Microsoft для runtime governance и контроля AI-агентов.

Что это

Agent Governance Toolkit помогает добавлять runtime governance к агентным системам: политики, контроль действий и дополнительные механизмы безопасности.

Ключевые параметры

  • Категория: Agent governance

Когда выбирать

Нужен для тестирования промптов, оценки качества, guardrails, red teaming, наблюдаемости и контроля AI-систем перед production.

На что обратить внимание

Оценки должны быть привязаны к реальным рискам: утечки данных, токсичность, галлюцинации, неверные действия агента и нарушения политик.

Как начать

  • Опишите рисковые сценарии.
  • Соберите тестовый набор.
  • Запустите регулярные проверки.
  • Отслеживайте регрессии после изменений.

Лучше всего подходит

Типовые задачи

agent governance runtime security Microsoft policy open-source

Упоминания

Статьи, где встречается Microsoft Agent Governance Toolkit