A49 · Модель и цепочка поставки

Кража модели и вывод весов

Веса, адаптеры, промпты, оценочные наборы данных и рецепты дообучения — активы высокой ценности. Их утрата означает потерю конкурентного преимущества: получивший их может создать замену или использовать модель во вред.

Иллюстрация к карточке угрозы «Кража модели и вывод весов»
Отправить с описанием:TelegramWhatsApp
Кратко для руководителя

В чём суть риска

Веса, адаптеры, промпты, оценочные наборы данных и рецепты дообучения — активы высокой ценности. Их утрата означает потерю конкурентного преимущества: получивший их может создать замену или использовать модель во вред.

Артефакты модели лежат в реестре или хранилище с избыточно широкими правами доступа. Недобросовестный сотрудник или скомпрометированная учётная запись получает возможность их скачать. Выгрузка выглядит как обычная работа с хранилищем и не вызывает вопросов. Граница доверия нарушается там, где доступ к самому ценному активу не требует отдельного согласования. После выгрузки вернуть контроль над копией невозможно.

Связь со стандартамиOWASPLLM03, LLM04MITRE / ATT&CKATLAS: ML Supply ChainNISTNIST AI 100-2: Poisoning
01
Влияние на бизнес

Чем риск оборачивается для компании

Финансы

Утрата конкурентного преимущества, в которое вложены средства на разработку и дообучение.

Данные

Утечка интеллектуальной собственности: весов, промптов, наборов данных и рецептов дообучения.

Безопасность

Похищенная модель может применяться злоумышленником в собственных целях.

Где риск наиболее вероятен

Собственные и дообученные модели в реестреХранилища артефактов с общим доступом для командыРабота подрядчиков с весами и наборами данныхПеренос моделей между средами
02
Зоны ответственности

Кому и что решать

ИТ-директор

Выделить защищённое хранилище для артефактов моделей и включить их в перечень критичных активов.

Директор по кибербезопасности

Обеспечить шифрование, согласование доступа и контроль выгрузок с анализом поведения пользователей.

Владелец бизнес-процесса

Оценить стоимость модели как актива и определить, кому доступ действительно необходим.

03
Сигналы для службы мониторинга

Что стоит наблюдать

Признаки сами по себе не доказывают инцидент. Их полезно сопоставлять с учётной записью, версией модели, решением политики, источником контекста и результатом вызова инструмента.

Выгрузка необычно большого объёма данных из хранилища моделей
Обращение к артефактам от пользователя, ранее с ними не работавшего
Появление новых токенов доступа к реестру без заявки
Артефакты не имеют водяных знаков
Хранилище моделей не охвачено средствами контроля утечек
04
Проектирование защиты

Какие меры создают границу

Меры работают в связке и не перекладывают ответственность на модель: важны границы полномочий, владелец, телеметрия и процедура безопасного отказа.

01Организационная

Согласование доступа к артефактам

Выдавать доступ к весам и наборам данных по заявке с подтверждением владельца и ограниченным сроком.

02Техническая

Защищённое хранилище моделей

Держать веса и связанные артефакты в отдельном хранилище с шифрованием.

03Техническая

Ограничение выгрузок

Запретить массовое скачивание артефактов без отдельного разрешения.

04Техническая

Водяные знаки для моделей

Помечать модели, чтобы доказать происхождение копии при её обнаружении вне компании.

05Мониторинг

Анализ поведения пользователей

Выявлять нетипичные обращения к хранилищу и новые токены, направлять их на разбор.

05
Управленческий контроль

Вопросы, показатели и первые шаги

Вопросы команде и поставщику

  1. Где хранятся веса наших моделей и кто имеет к ним доступ?
  2. Заметим ли мы выгрузку модели целиком?
  3. Сможем ли доказать, что найденная на стороне модель — наша?
  4. Какие подрядчики работают с нашими артефактами?

Показатели контроля

  • Число учётных записей с правом выгрузки артефактов моделей
  • Доля артефактов, размещённых в защищённом хранилище
  • Число нетипичных выгрузок, выявленных и разобранных за период

Первые 30 дней

  1. Пересмотреть права доступа к реестру и хранилищу моделей
  2. Отозвать неиспользуемые токены доступа
  3. Включить оповещения о выгрузке больших объёмов из хранилища
06
Проверка в пилоте

Как проверить в пилотном проекте

Подтвердить происхождение и управляемый путь поставки модели, адаптера, данных и зависимостей.

1

Состав AI-системы связывает артефакт модели, зависимости, набор данных и версию развёртывания.

2

Поступление артефакта из неутверждённого источника проходит контроль до выполнения.

3

Команда демонстрирует проверку, доказательство версии и безопасный откат.

Открыть матрицу пилота
07
Контекст рынка

Какие классы решений рассматривать

Реестр моделейЗащищённое хранилище AIЗащита от утечек данных (DLP)Управление доступом (IAM)

Ниже — редакционные профили поставщиков, связанные с доменом угрозы. Это не рейтинг и не подтверждение применимости: заявленные функции следует проверить в вашем пилоте по указанным критериям.

Проверенные источники

Источники и проверка

Сначала — объяснение для русскоязычной команды. Затем — первоисточники, по которым можно проверить границы, методологию и применимость в конкретной архитектуре.

S04 · OWASPLLM03:2025 Supply ChainЦепочка поставки моделей, данных и зависимостей.S12 · NISTAI 100-2e2025: Adversarial Machine LearningТаксономия атак и mitigations для adversarial ML.S39 · ITOREXFoxOps vendor profileAI-Vault и controlled corporate AI infrastructure.