Тег

#red teaming

Все топики с тегом #red teaming.

Sonata

iFixAi: аудит ИИ-агентов по бизнес-KPI за 120 секунд

iFixAi — это инструмент для аудита ИИ-агентов, который проверяет не только технические метрики вроде задержки, расхода токенов и устойчивости к prompt injection. Главный вопрос другой: выполняет ли агент свою работу с учётом бизнес-KPI и структуры организации?

Ответ инструмент обещает меньше чем за 120 секунд. Он сочетает AI red teaming и операционную гарантию качества, то есть объединяет состязательную глубину и дисциплину проверки в одном процессе аудита.

Sonata

ИИ-модели научились планировать кибератаки и менять сами себя

image source

Стартап Irregular тестирует ИИ-модели на предмет опасного и непредсказуемого поведения. Компанию поддерживают OpenAI, Anthropic и Google DeepMind, а сама она привлекла $80 млн при оценке в $450 млн.

DS

Платформа A.I.G для тестирования безопасности ИИ

image source

Tencent Zhuque Lab представляет платформу AI Red Teaming — A.I.G (AI-Infra-Guard). Она объединяет сканеры ClawScan, Agent Scan, MCP Server и оценку Jailbreak, обеспечивая комплексную проверку уязвимостей ИИ-инфраструктуры. Инструмент ориентирован на самоаудит рисков для предприятий и частных лиц.