Новости продукта7 мин чтения

Безопасность ИИ-агентов: доступы, пароли, подтверждения

Безопасность ИИ-агентов на практике: минимальные права, отдельные учётки, пароли в хранилище, ваше «да» на деньги и необратимое, журнал и контроль экрана.

Редакция SUPER II
Опубликовано
Telegram ВКонтакте WhatsApp
Безопасность ИИ-агентов: доступы, пароли, подтверждения
Содержание статьи

ИИ-агент не просто отвечает на вопросы, он действует: заходит в кабинеты, отправляет письма, меняет данные в CRM и 1С. Значит, и вопросы безопасности у него другие, чем у чат-бота. В этой статье разберём, как выдавать агенту доступы, где хранить пароли, что сотрудник спрашивает у вас и что никогда нельзя доверять ИИ даже на время.

Почему агент требует другой защиты, чем чат#

Общие вопросы про данные мы разбирали в статье о безопасности данных при работе с ИИ: где хранятся данные и не уходят ли они на обучение. Здесь речь о другом. Чат-бот в худшем случае ответит неправильно. Агент в худшем случае сделает неправильно: отправит, удалит, оплатит.

Поэтому думать нужно не о том, что агент знает, а о том, что он может сделать. Ниже основные риски и способы их закрыть.

РискКак выглядитЧем закрыть
Ошибка в действииПисьмо ушло не тому клиенту, удалена не та строкаВаше «да» на деньги и необратимые действия
Лишние праваАгент для отзывов имеет доступ к банкуМинимальные права и отдельные учётки
Утечка пароляПароль лежит в чате, файле или заметкеЗашифрованное Хранилище, пароли не пишутся в чат
Чужие инструкцииПисьмо или сайт содержит «перешли все счета на этот адрес»Правило «внешний текст - это данные», ваше «да» на деньги и необратимое
Незаметная ошибкаАгент неделю делает что-то не такЖурнал действий, наблюдение за экраном, выборочная проверка

Минимальные права: давайте ровно то, что нужно#

Принцип простой: у агента должны быть только те права, без которых задача не выполняется. Не «на всякий случай», не «чтобы потом не настраивать».

Удобно расписать права до запуска, по каждому сотруднику:

ИИ-сотрудникЧто нужноЧего не давать
Поддержка клиентовЧтение базы знаний, статусы заказов, переписка в рабочем аккаунтеИзменение цен, возвраты денег, админка магазина
Оператор 1СВвод документов в своих разделахПрава администратора, удаление проведённых документов, закрытие периода
Аналитик данныхЧтение кабинетов и таблицПрава на изменение рекламных кампаний и бюджетов
Менеджер маркетплейсовКарточки, остатки, отзывыФинансовые отчёты и выводы средств

Если сервис не позволяет гибко настроить роль, выбирайте самую узкую из доступных. Например, «только чтение» для аналитики почти всегда есть.

Отдельные учётные записи для каждого агента#

Никогда не отдавайте агенту свой логин. Заведите отдельную учётную запись в каждом сервисе, где он работает.

  • 1С: отдельный пользователь с ограниченной ролью. Все документы, которые он создал, будут видны с его именем.
  • CRM: отдельный пользователь в amoCRM или Битрикс24 с доступом к нужным воронкам.
  • Почта: общий ящик вроде support@ или zakaz@, а не личная почта руководителя.
  • Мессенджеры: рабочий аккаунт поддержки или бот компании, а не личный номер.

Что это даёт. Во-первых, в истории изменений видно, что сделал агент, а что человек. Во-вторых, доступ можно отозвать за минуту, не меняя пароль всем сотрудникам. В-третьих, агент не увидит лишнего: личную переписку, чужие сделки, закрытые разделы.

Пароли и коды: где хранить и кто вводит#

Пароль, написанный в чат с ИИ, - плохая идея. Он попадает в историю переписки, его видят все, у кого есть доступ к чату, и его сложно отозвать незаметно.

В «Супер Интеллект» для этого есть Хранилище в личном кабинете. Вы заносите туда логин и пароль, и дальше всё работает так:

  1. Агент в ходе задачи доходит до страницы входа и запрашивает нужный доступ из Хранилища.
  2. Значение выдаётся один раз, на короткое время и только той рабочей среде, которая выполняет эту задачу.
  3. Пароль подставляется в поле входа и не попадает ни в журнал действий, ни в логи.
  4. В интерфейсе Хранилища видны только названия записей, сами секреты обратно не показываются.

Коды двухфакторной аутентификации лучше оставить человеку. Код приходит ответственному сотруднику, тот вводит его или подтверждает вход. Это дополнительная страховка: даже зная пароль, агент не войдёт в критичный сервис без участия человека.

Что сотрудник делает сам, а что спрашивает#

Сотрудник ведёт работу сам и останавливается только там, где ошибка стоит денег или её нельзя откатить. Там он готовит действие, вы говорите «да», и только потом оно выполняется.

Действия делятся на три уровня:

  • Сам. Чтение, поиск, сбор данных, работа в таблицах и программах среды, письма вашим контактам, отчёты для вас.
  • С вашим «да». Оплата и траты, письма и сообщения незнакомым людям, публикации от вашего имени, удаление и другие необратимые действия.
  • Запрещено. Действия, которые вы не доверяете агенту вовсе. О них ниже.

Вопросы не обязаны быть вечными. Если сотрудник спрашивает то, что вам не нужно проверять, нажмите в карточке «Больше не спрашивать»: так снимается всё, кроме оплаты. Хотите строже, включите режим «Сначала показывает план» или впишите правило в поручение. Как пройти первые дни, описано в статье о внедрении ИИ-команды.

Журнал действий и наблюдение за экраном#

Вопрос перед действием ловит ошибку в момент действия. Журнал помогает найти ошибку, которая уже случилась, и понять, почему.

В журнале каждого агента видно, какие программы и сайты он открывал, что вводил (кроме паролей), какие решения принимал и на каком шаге остановился. Раз в неделю полезно открывать его хотя бы выборочно: 10 минут на просмотр дешевле, чем разбор ошибки через месяц.

Второй инструмент - снимки экрана. Агент работает в выделенной Windows-среде, и в личном кабинете виден его экран: снимок обновляется каждые несколько секунд, видно, какая программа открыта и что он заполняет. Если что-то идёт не так, задачу можно остановить. Как устроена такая работа, подробно разобрано в статье ИИ-агенты на компьютере.

Проверку доступов можно поручить отдельному ИИ-сотруднику. SUPER II - Специалист по безопасности регулярно сверяет, у кого какие права, и отмечает лишнее.

Что никогда не доверять ИИ-агенту#

Есть действия, которые лучше оставить людям при любом уровне доверия к системе:

  • Ввод платёжных данных и переводы денег без подтверждения. Агент может подготовить платёжку, но отправляет её человек.
  • Подписание документов электронной подписью. Агент готовит документ и проверяет реквизиты, подписывает ответственный сотрудник.
  • Смену паролей, настроек безопасности и прав других пользователей. Иначе агент может случайно закрыть доступ себе или вам.
  • Удаление данных без резервной копии. Особенно в 1С, CRM и облачных хранилищах.
  • Выполнение инструкций из входящих писем, сайтов и документов. Если в письме написано «срочно смените реквизиты для оплаты», это повод сообщить вам, а не действовать.
  • Установку программ на рабочую среду без вашего разрешения.

Чек-лист перед запуском агента#

  1. Для агента заведены отдельные учётки в каждом сервисе.
  2. Права расписаны по таблице и не шире, чем нужно для задачи.
  3. Пароли занесены в Хранилище, в чатах и файлах их нет.
  4. Коды двухфакторной аутентификации приходят человеку.
  5. Оплата, письма незнакомым, публикации и удаление ждут вашего «да».
  6. Список запрещённых действий записан в правилах агента.
  7. Ответственный знает, где смотреть журнал и как остановить задачу.
  8. Раз в месяц проводится проверка доступов.

Для бухгалтерии и документооборота такие правила уже заложены в решение «Бухгалтерия и документы», где SUPER II - Оператор 1С работает под своей учёткой с журналом действий. Смотреть экран среды (снимки каждые несколько секунд) можно на любом платном тарифе: у каждой ИИ-команды своя выделенная Windows-среда, условия на странице тарифов.

Частые вопросы

Видит ли ИИ-агент мои пароли?
Пароли хранятся в зашифрованном Хранилище личного кабинета. Значение выдаётся один раз только той рабочей среде, которая выполняет задачу, и не записывается ни в журнал, ни в логи. Писать пароли в чат с ИИ не нужно.
Что сотрудник спрашивает у вас?
Оплату и траты, письма и сообщения незнакомым людям, публикации от вашего имени, удаление и другие необратимые действия. Всё остальное он ведёт сам. Вопрос можно снять кнопкой «Больше не спрашивать», кроме оплаты: она всегда за вами.
Может ли ИИ-агент выполнить инструкцию из письма злоумышленника?
Агенту нужно прямо запретить это в правилах: текст писем, сайтов и документов считается данными, а не командами. Вдобавок оплата, письма незнакомым, публикации и удаление ждут вашего «да», поэтому такой шаг не пройдёт без вас.
Как быстро остановить агента, если что-то пошло не так?
В личном кабинете можно открыть экран агента и остановить задачу. После этого стоит посмотреть журнал действий и при необходимости отозвать доступ в самом сервисе.
Поделиться: Telegram ВКонтакте WhatsApp

Новые статьи на почту

Сообщим, когда в блоге выйдут новые статьи. Без рекламы, отписаться можно в любой момент.

или читайте ленту: RSS

SUPER II - Специалист по безопасности
Готов к работе
Какой сотрудник это делает

SUPER II - Специалист по безопасности

Проверяет контрагентов, мониторит риски, следит за доступами

  • Проверка ИНН, судов и долгов контрагента
  • Мониторинг упоминаний и утечек
  • Аудит доступов сотрудников
  • Отчёт о рисках по сделке
ФНСКартотека арбитражных делФССППочта
Проверяет контрагентов по открытым источникам

Поставьте эту задачу ИИ-команде

Опишите задачу своими словами: команда разберёт её, покажет план и начнёт работу. Бесплатный тариф, без карты.