Эфир 18.11 · Поток 318 ноября в 19:00 МСК — бесплатный практический эфир по ИИ-агентам · Живой Поток 3 стартует 23.11Эфир 18 ноября →Поток 3 (23.11)
Безопасность и правоРазбор · На радарZDNet AI→ оригинал

Black Kite выявила критические уязвимости у 34,2% проверенных ИИ-компаний

Подключая ИИ-помощника к коду или CRM, команда доверяет поставщику доступ к своим данным. По пересказу отчёта Black Kite в ZDNet, у 34,2% из 18 160 проверенных ИИ-компаний нашли хотя бы одну незакрытую критическую уязвимость. Если злоумышленник получит доступ к сервису, выданные ему разрешения могут открыть путь в системы клиента. Практический шаг — проверить интеграции и сократить права до необходимых.

AI-обработка оригинала ZDNet AI; редакция Hamidun News
Black Kite выявила критические уязвимости у 34,2% проверенных ИИ-компаний
Источник: ZDNet AI. Коллаж: Hamidun News.
Слушать статью
Паспорт материала и цифры
ПараметрДанные
ПервоисточникZDNet AI ↗
Главный редактор
Ключевой факт #161,7% компаний имели проблемы с DMARC — защитой почты от подделки.
Ключевой факт #2Высокий риск атак вымогателей отмечен у 29,7% компаний по индексу Black Kite.
Ключевой факт #3Для каждой интеграции определите доступные данные и способ отозвать доступ.

Команда подключает ИИ-помощника к репозиторию, чтобы он разбирал ошибки и предлагал исправления. Помощник получает токен доступа, читает код, иногда запускает команды. Теперь безопасность проекта зависит ещё и от того, как поставщик хранит этот токен и защищает собственную инфраструктуру. Хорошие ответы модели ничего об этом не говорят.

В материале ZDNet от 10 ноября приводятся результаты отчёта Black Kite об ИИ-поставщиках. Из 18 160 проверенных компаний у 34,2% обнаружили хотя бы одну незакрытую критическую уязвимость. Для разработчика и основателя это повод проверить, какие двери уже открыты внешним сервисам: от чтения клиентских обращений до изменения кода и доступа к рабочей инфраструктуре.

Что именно нашли исследователи

Выборка охватывает компании разного размера: от небольших команд до организаций с более чем тысячей сотрудников. В неё вошли разработчики приложений, исполнители проектов по внедрению ИИ, отраслевые сервисы и поставщики данных, вычислений и моделей. Компании, использующие ИИ лишь эпизодически, исключили.

Помимо критических уязвимостей, исследователи отметили проблемы с DMARC у 61,7% компаний и слабости DKIM у 37,3%. Это механизмы проверки подлинности электронной почты. Ошибки в их настройке могут облегчать подделку писем и фишинг: например, когда сотруднику приходит якобы служебная просьба повторно авторизовать интеграцию.

Ещё 29,7% компаний получили оценку высокой восприимчивости к атакам вымогателей по индексу Black Kite. Здесь важно прочитать цифру правильно: это оценка риска, а не доля организаций, которые уже зашифровали преступники. Аналогично, наличие критической уязвимости само по себе не доказывает, что через неё можно добраться до данных конкретного клиента.

В пересказе также указано, что похищенные корпоративные учётные данные были связаны с 6,8% поставщиков в выборке. Такая находка требует проверки актуальности паролей, действующих сессий и многофакторной аутентификации. Она не равнозначна подтверждённому взлому всех клиентских систем.

Как проблема поставщика становится вашей

Представим помощника поддержки, подключённого к CRM. Для подготовки черновика ответа ему нужны текст обращения и несколько полей карточки клиента. Но при настройке команда выдаёт сервису возможность выгружать всю базу и менять записи: так быстрее запустить пилот.

Если доступ к поставщику окажется у злоумышленника, последствия будут зависеть от этих разрешений. Возможность читать отдельные обращения и возможность экспортировать клиентскую базу создают разный масштаб ущерба. Поэтому полезно оценивать интеграцию через конкретный вопрос: что сможет сделать человек, завладевший её токеном?

Отдельный разбор MCP-компонентов, который упоминает ZDNet, содержит 1 732 замечания безопасности. Из них 48,8% отнесены к высокому или критическому уровню, включая возможности внедрения кода и команд. Это доля замечаний в отдельном анализе. Из неё нельзя заключить, что уязвимы 48,8% всех MCP-серверов или компаний.

Сам MCP помогает связывать ИИ-приложения с инструментами и бизнес-системами. Практическая проверка здесь касается реализации: кто может вызвать инструмент, какие аргументы он принимает и с какими правами выполняется действие.

Что проверить перед следующим подключением

Начните с перечня ИИ-сервисов, которым уже выданы доступы. Для каждого зафиксируйте владельца внутри команды, доступные данные, разрешённые действия и способ быстро отключить интеграцию. Такой список превращает обсуждение безопасности в понятную инженерную задачу.

Затем сократите разрешения до нужных для рабочего сценария. Помощнику, который составляет черновики, стоит отдельно обосновать право отправлять сообщения, менять записи или выполнять команды. Для опасных действий полезно предусмотреть подтверждение человеком и журнал операций.

У поставщика стоит выяснить, как он устраняет критические уязвимости, защищает учётные записи и сообщает об инцидентах. Повторять проверку особенно полезно при расширении доступа: вчера сервис читал документацию, сегодня получил возможность писать в репозиторий.

У отчёта есть ограничения: по приведённому пересказу нельзя сравнить риск ИИ-компаний с обычными SaaS-поставщиками или оценить безопасность выбранного продукта. Зато он даёт конкретный повод пересмотреть разрешения. Перед расширением пилота проверьте, соответствует ли доступ сервиса задаче, ради которой вы его подключили.

Сюжет

Вопросы и ответы по материалу

Что известно по теме: что именно нашли исследователи?

Выборка охватывает компании разного размера: от небольших команд до организаций с более чем тысячей сотрудников. В неё вошли разработчики приложений, исполнители проектов по внедрению ИИ, отраслевые сервисы и поставщики данных, вычислений и моделей. Компании, использующие ИИ лишь эпизодически, исключили. Помимо критических уязвимостей, исследователи отметили проблемы с DMARC у 61,7% компаний и слабости DKIM у 37,3%. Это механизмы проверки подлинности электронной почты.

Что известно по теме: как проблема поставщика становится вашей?

Представим помощника поддержки, подключённого к CRM. Для подготовки черновика ответа ему нужны текст обращения и несколько полей карточки клиента. Но при настройке команда выдаёт сервису возможность выгружать всю базу и менять записи: так быстрее запустить пилот. Если доступ к поставщику окажется у злоумышленника, последствия будут зависеть от этих разрешений. Возможность читать отдельные обращения и возможность экспортировать клиентскую базу создают разный масштаб ущерба.

Что известно по теме: что проверить перед следующим подключением?

Начните с перечня ИИ-сервисов, которым уже выданы доступы. Для каждого зафиксируйте владельца внутри команды, доступные данные, разрешённые действия и способ быстро отключить интеграцию. Такой список превращает обсуждение безопасности в понятную инженерную задачу. Затем сократите разрешения до нужных для рабочего сценария. Помощнику, который составляет черновики, стоит отдельно обосновать право отправлять сообщения, менять записи или выполнять команды.

ЖХ
Жемал Хамидун — CPO Alpina Digital, продакт-менеджер AlpinaGPT. Делает AI-продукты с 2019 года. Hamidun News — pet project, который вырос в production-агрегатор с 6000+ читателей.
✦ Закрытый клуб практиков · Vibe Club

Внедряйте ИИ быстрее рынка вместе с инженерами и фаундерами

Внутри Vibe Club (hamidun.com/club): еженедельные живые мастермайнды и разборы архитектуры с Жемалом Хамидуном, закрытый Tech Radar, LMS и обновляемая база из 370+ боевых скиллов.

Вступить в Vibe Club →Тест-драйв Академии (72ч)
Что вы думаете?
Загружаем комментарии…