Безопасность

Swordfish Security представили фреймворк для защиты систем искусственного интеллекта

Бесплатная методика оценки уровня развития организаций, использующих технологии искусственного интеллекта, станет доступной для команд информационной безопасности. Это решение специалистов по кибербезопасности направлено на насыщение формирующегося сегмента ИИ-защиты профессиональными знаниями. Такие данные были предоставлены CNews представителями ГК Swordfish Security.

Карта рисков и превентивных мер разрабатывалась с ориентацией на российский рынок, принимая во внимание нормативы отечественных регуляторов и особенности местных ИИ-решений. В рамках фреймворка «Swordfish: SAIMM» систематизированы ключевые аспекты анализа ИИ, охватывающие интеллектуальных агентов, параметры риск-оценки и стратегию минимизации угроз. Фактически это инструмент самоаудита для предприятий, внедряющих ИИ-технологии и стремящихся определить текущий уровень развития, а также сформировать план его повышения.

«На отечественном рынке практически ежедневно появляются новые ИИ-агенты, а коммерческие структуры активно интегрируют решения на основе языковых моделей для оптимизации рабочих процессов. Без надлежащих мер защиты нынешние масштабы и сложность кибератак на бизнес могут показаться незначительными, поскольку ИИ-системы обладают специфической архитектурой, устроены сложнее, а обойти их защиту зачастую легче, чем в случае с традиционным программным обеспечением», – отметил Юрий Шабалин, директор по развитию ИИ-технологий Swordfish Security.

Значимым компонентом фреймворка стала классификация угроз для ИИ-систем. Методология акцентирует внимание на специфических ИИ-рисках, расширяя традиционные подходы AppSec. При создании учтены международные стандарты классификации уязвимостей: OWASP Top-10, NIST AI, RMF, ENISA, MITRE ATLAS. Разработчики консолидировали примерно 80 фундаментальных уязвимостей систем с элементами искусственного интеллекта. В таксономию вошли, в частности, компрометация моделей, обход защитных механизмов, утечка конфиденциальных данных в ответах системы, конфликт инструкций и другие. Для каждой угрозы указано соответствие международным классификациям, а также меры защиты и контроля.

Процедура оценки уровня зрелости применима к любым организациям, использующим ИИ, включая финтех, электронную коммерцию или государственные структуры. Создатели фреймворка безопасности ИИ являются участниками Консорциума по безопасности искусственного интеллекта, а в основу разработки легли результаты общероссийского исследования.

«При создании фреймворка мы также руководствовались положениями нацпроекта «Искусственный интеллект в критической информационной инфраструктуре» – оба документа разрабатывались синхронно, и домены нашей методологии органично вписываются в его структуру. Мы предлагаем практическую детализацию нормативов: распределение зон ответственности, перечень формируемых артефактов, области автоматизации контроля и процедуры внедрения/эксплуатации/реагирования», – пояснила Альбина Аскерова, руководитель регуляторного направления Swordfish Security.

Каждая четвертая из ведущих финансовых организаций уже сталкивалась с инцидентами безопасности, связанными с искусственным интеллектом – такие данные были получены в ходе исследования, проведенного Финтех Ассоциацией в партнерстве с Swordfish Security. Это служит серьезным предупреждением для делового сообщества, свидетельствуя о том, что новая цифровая эра уже наступила, однако средства защиты данных для нее находятся лишь на стадии формирования.

Поделиться:

0 Комментариев

Оставить комментарий

Обязательные поля помечены *
Ваш комментарий *
Категории