Что произошло: не новый фильтр ответов, а закрепление риск-категории
Повод выглядит небольшим: в Google News появилась страница OpenAI об Elevated Risk labels, а справочный центр компании отдельно объясняет смысл этого ярлыка. Но речь не о косметическом изменении интерфейса. OpenAI формализует способ показывать пользователям и администраторам, что отдельные возможности ChatGPT, Codex и других продуктов несут риск выше обычного, прежде всего из-за prompt injection, то есть атак через инструкции, спрятанные в недоверенном контенте.
Факт нужно отделить от интерпретации. По доступным первоисточникам это не выглядит как совершенно новый анонс, внезапно выпущенный 27 июля 2026 года. У OpenAI уже есть публичный материал о Lockdown Mode и Elevated Risk labels, а справочная статья уточняет, как применяется этот ярлык. Свежесть сюжета в другом: OpenAI продолжает собирать вокруг агентных и сетевых функций отдельный слой safety-контролей, где риск маркируется не только на уровне модели, но и на уровне продукта.
Главное: Elevated Risk labels не означают, что каждый ответ ChatGPT теперь получает новый класс опасности. Ярлык относится к capability, то есть к возможности или функции. Например, к сетевому доступу агента, работе с внешними источниками, файлами, коннекторами и другими сценариями, где модель не только пишет текст, но и действует через инструменты. Именно эта связка меняет масштаб угрозы.
OpenAI описывает Elevated Risk как единый ярлык, терминологию и визуальную метку для функций, которые создают дополнительные риски безопасности. В справочной статье компания прямо указывает, что такие функции могут быть доступны по выбору пользователя или организации и в режиме раннего доступа. Это существенная продуктовая и юридическая деталь: речь не о стандартной общедоступной функции, которую компания считает полностью зрелой, а о возможности, требующей осознанного включения.
Формулировка о том, что OpenAI якобы незаметно представила Elevated Risk labels именно сегодня, нуждается в уточнении. Свежий RSS-триггер и появление страницы в новостной выдаче не равны самостоятельному новому запуску. Корректнее говорить так: OpenAI документально закрепила и продолжает обновлять схему маркировки повышенного риска для функций, где модель получает больше агентности, доступа к сети или внешнему контенту.
Для читателя это различие принципиально. Если назвать Elevated Risk новой политикой классификации выходных ответов, получится неверная картина: будто OpenAI меняет модерацию каждого ответа. В первоисточнике говорится о маркировке features и capabilities. Иными словами, фокус переносится с вопроса, можно ли модели произнести этот текст, на вопрос, какие действия и источники доступны модели в этом режиме.
- Факт: OpenAI описывает Elevated Risk labels в Help Center как ярлык для рискованных возможностей.
- Продуктовая логика: такие возможности могут даваться в optional или early access-режиме, а ярлык может быть снят, если риск сочтут разумно сниженным.
- Интерпретация: OpenAI выстраивает отдельный UX- и policy-слой для агентных функций, а не только усиливает классическую модерацию текста.
Цитата в переводе«Самый распространённый повышенный риск у таких маркированных функций: атаки prompt injection.»
Как устроен Elevated Risk: ярлык получает возможность, а не реплика модели
В терминологии OpenAI capability это не отдельный ответ и не конкретный запрос пользователя, а функциональная возможность продукта. Например, агент может получить сетевой доступ, чтобы искать документацию, обращаться к веб-страницам или работать с внешними инструментами. Такая возможность полезна сама по себе: без доступа к актуальной документации кодовый агент хуже решает практические задачи. Но вместе с пользой появляется другой класс угроз. Модель читает недоверенный контент и может принять вредоносную инструкцию за часть задания.
Elevated Risk label нужен именно для таких случаев. Он сигнализирует: OpenAI считает, что в этой функции есть риск, который не полностью закрыт стандартными мерами безопасности отрасли. Наиболее значимый пример, названный в Help Center, это prompt injection. Это атака, при которой вредоносная инструкция попадает к модели не напрямую от пользователя, а через документ, сайт, комментарий в коде, сообщение в коннекторе или другой внешний источник.
В прежней логике чат-бота риск часто представляли как диалог пользователя с моделью: пользователь просит вредный совет, модель должна отказать. В агентной логике возникает цепочка из недоверенного ввода, модели, инструмента, сети, файла, кодовой базы или внешней системы. Ошибка на любом участке может привести не только к плохому ответу, но и к утечке данных, нежелательному действию или обходу ограничения среды.
Поэтому Elevated Risk ближе к маркировке опасной зоны на карте, чем к запрету. Он не говорит, что функция непригодна. Он говорит, что при её включении пользователь или администратор должны учитывать отдельную threat model, то есть модель угроз: какие данные видит агент, какие инструменты ему доступны, куда он может отправлять запросы и какие действия требуют подтверждения.
Практический смысл такого ярлыка в том, что риск перестаёт быть абстрактной фразой из политики безопасности. Он оказывается привязан к конкретной функции: сетевому доступу, агентному режиму, работе с внешними источниками, коннекторами или кодовой средой. Это важно для команд, которые включают AI-инструменты не ради демонстрации, а в реальном рабочем процессе.
Если функция просто помогает сформулировать письмо, одна модель угроз. Если она читает документы, ходит по ссылкам, анализирует репозиторий и может предложить изменения в коде, модель угроз уже другая. Elevated Risk labels фиксируют именно этот переход от текстового ассистента к системе, которая взаимодействует с окружением.
Почему prompt injection стал центральным риском для OpenAI
Prompt injection долго воспринимали как странность больших языковых моделей: можно попросить чат-бота забыть предыдущие инструкции или спрятать команду в тексте. Для продуктов с инструментами это уже не игра с формулировками. Если модель читает веб-страницу, репозиторий, тикет поддержки или документ клиента, вредоносная инструкция может оказаться внутри обычного рабочего контента.
Материалы Wired о prompt injection в ChatGPT и рисках плагинов показывали одну проблему с разных сторон: модель трудно заставить стабильно отличать доверенную инструкцию системы от текста, который она должна просто проанализировать. В закрытом чате это может привести к неверному ответу. В связке с плагинами, коннекторами и агентами риск выше: модель может попытаться использовать доступные ей инструменты не так, как ожидал пользователь.
Ars Technica в июльском материале о defensive prompt injection описывала следующий виток: организации не только защищаются от prompt injection, но и используют похожие техники, чтобы влиять на поведение AI-систем, читающих их контент. Это признак зрелости проблемы. Prompt injection становится частью операционной безопасности интернета: страницы, репозитории и документы могут быть написаны с расчётом на то, что их прочитает агент.
В такой среде OpenAI не может честно сказать: мы просто обучим модель игнорировать всё вредное. Технически это остаётся целью, но на продуктовом уровне приходится добавлять другие слои: предупреждения, режимы блокировки, ограничения сети, sandboxing, approval flows и админские политики. Elevated Risk label вписывается именно в эту многоуровневую защиту.
Для пользователя это означает неприятную, но полезную перемену в мышлении. Нельзя оценивать агентный режим только по тому, насколько хорошо он пишет ответ. Нужно смотреть, откуда он берёт данные, что он считает инструкцией, какие действия может выполнить без подтверждения и можно ли отделить доверенные источники от недоверенных.
Для разработчика или администратора вопрос становится ещё конкретнее. Если агент читает внешние страницы, файлы клиентов, комментарии в коде или сообщения из сторонних систем, то prompt injection перестаёт быть экзотикой. Это нормальный класс угроз для любого сценария, где AI-система обрабатывает чужой контент и имеет доступ к инструментам.
Lockdown Mode показывает вторую половину схемы: не только предупреждать, но и ограничивать каналы
Elevated Risk label сообщает о повышенном риске. Lockdown Mode, описанный OpenAI в связанном публичном материале, отвечает на практический вопрос: что делать, если пользователь или организация не хотят, чтобы агентные функции имели свободный сетевой контур. В такой архитектуре цель не в том, чтобы исправить каждую возможную инструкцию в недоверенном тексте. Нужно уменьшить последствия, если модель всё же увидит вредоносную команду.
Это меняет акцент. В классической safety-модерации компания пытается классифицировать запрос или ответ: разрешить, отказать, перенаправить. В security-контексте агентных систем приходится ограничивать возможности среды: может ли агент обращаться в интернет, скачивать файлы, читать конкретные директории, отправлять данные наружу, запускать код и выполнять действия без подтверждения.
Такой подход ближе к тому, как давно устроена корпоративная безопасность: минимально необходимые права, журналирование, разделение доверенных и недоверенных источников, sandbox, ручное подтверждение опасных операций. Разница в том, что теперь эти принципы нужно перевести в интерфейс массового AI-продукта, где пользователь ожидает простого переключателя, а администратор ожидает управляемой политики риска.
OpenAI аккуратно не обещает невозможного. Даже если сетевой доступ ограничен, prompt injection может повлиять на ход рассуждения или качество ответа, если вредоносная инструкция попала в документ, файл или кэшированный контент. Поэтому Lockdown Mode и Elevated Risk labels стоит читать не как гарантию защиты, а как признание конкретного остаточного риска и попытку сделать его управляемым.
Здесь важна связка предупреждения и технического ограничения. Предупреждение само по себе помогает только тем, кто готов его учитывать. Ограничение канала снижает возможный ущерб, если предупреждение не сработало, пользователь ошибся или недоверенный контент оказался убедительным для модели.
Именно поэтому Elevated Risk не стоит воспринимать как декоративную иконку. Если рядом нет режима блокировки, sandbox, approvals, контроля доступа к файлам и других ограничений, маркировка остаётся слабым инструментом. Она полезна как сигнал, но реальная безопасность начинается там, где у агента есть границы среды.
Codex и агентное программирование: где риск становится материальным
Самый понятный пример Elevated Risk это кодовый агент. Когда система помогает писать программу, ей часто нужен доступ к репозиторию, документации, пакетам, тестам и среде исполнения. Без этого она остаётся советчиком, который видит только фрагмент задачи. С доступом к инструментам она полезнее, но одновременно получает возможность читать секреты, изменять файлы, запускать команды и взаимодействовать с сетью.
Ars Technica в январском разборе технических деталей Codex обращала внимание именно на устройство агентной среды: sandbox, рабочие директории, сетевые политики и approval flows. Эти механизмы нужны не для архитектурной аккуратности, а для ограничения ущерба, если агент ошибётся, неверно поймёт задачу или будет атакован через контент.
Вывод не нужно преувеличивать. Один журналистский разбор не доказывает, что все агентные продукты небезопасны. Но он подтверждает: OpenAI обсуждает не абстрактную угрозу. Если агент может действовать в файловой системе, сети или кодовой среде, маркировка Elevated Risk заранее обозначает, что функция требует отдельного режима доверия.
Для команды разработки это превращается в набор рабочих вопросов. Что именно видит кодовый агент? Есть ли у него доступ к переменным окружения, токенам и файлам конфигурации? Может ли он отправлять данные во внешнюю сеть? Какие команды выполняются только после подтверждения? Где проходит граница между черновым предложением и реальным изменением в кодовой базе?
Prompt injection в такой среде может выглядеть не как злой запрос пользователя, а как комментарий в документации, инструкция в README, текст на веб-странице или содержимое файла, который агент должен проанализировать. Если модель воспринимает такой текст как руководство к действию, риск быстро перестаёт быть теоретическим.
Поэтому для Codex и похожих систем безопасная архитектура важнее красивой демонстрации. Агент должен быть полезным, но его полезность не должна зависеть от безграничного доступа. Чем точнее ограничены директории, сеть, команды и подтверждения, тем меньше шанс, что одна вредоносная инструкция станет цепочкой нежелательных действий.
Цитата в переводе«Доверенные клиентские агенты могут помочь сформировать будущее финансовых услуг.»
Enterprise-слой: OpenAI продаёт агентность, но вместе с правилами и эскалацией
На фоне Elevated Risk labels важен и другой продуктовый сигнал OpenAI: Presence. Компания описывает его как решение для enterprise-сценариев, где AI-агенты работают с клиентскими процессами, правилами, эскалацией и проверками. Это не тот же продукт, что ChatGPT с ярлыком риска, но логика общая: агентность становится коммерческой функцией, а безопасность переносится в настройки рабочего процесса.
В материале OpenAI о Presence акцент сделан на policies, guardrails, approved actions, simulations, evaluation tools и escalation rules. По-русски это означает: агенту заранее задают правила, разрешённые действия, сценарии проверки, критерии оценки и случаи, когда нужен человек. В enterprise-среде такой слой не факультативен. Чем больше агент может делать, тем раньше нужно определить, где он обязан остановиться.
OpenAI приводит и собственную продуктовую метрику: в English-language phone support channel компания заявляет о 75% inbound issues, решённых без участия человека. Эту цифру нужно подавать именно как заявленную OpenAI метрику, а не как независимый аудит качества или безопасности. Она показывает масштаб амбиции: агенты должны закрывать значительную часть операционных задач. Но доверие к таким системам строится не на одной модели, а на наборе ограничений, тестов и процедур эскалации.
Связь с Elevated Risk здесь не прямая, но существенная. OpenAI одновременно расширяет агентные функции и строит вокруг них инфраструктуру контроля. Это не поворот к осторожности в чистом виде и не отказ от рискованных возможностей. Скорее компания пытается сделать риск продаваемым и управляемым: показать клиенту, где находится опасная зона, и дать инструменты, которые уменьшают вероятность неприятного сценария.
Для бизнеса это означает, что покупка агента без правил процесса больше не выглядит зрелой стратегией. Нужны политики, разрешённые действия, тестирование сценариев, метрики качества, журналирование и понятный маршрут передачи человеку. Иначе организация получает не автоматизацию, а непрозрачного исполнителя, который может уверенно действовать не в том контексте.
Presence важен именно как пример enterprise-логики OpenAI. Компания говорит не только о модели, которая понимает пользователя, но и о системе, где агент вписан в процесс. Там заранее известно, что он может делать, что не может делать, когда должен остановиться и по каким сигналам задача уходит человеку.
Что меняется в safety-позиции OpenAI
В ранней публичной дискуссии о безопасности языковых моделей главный вопрос звучал просто: откажется ли модель от вредного запроса. Для OpenAI это по-прежнему важно, но Elevated Risk labels показывают более зрелую фазу: safety и security начинают сближаться. Security отвечает уже не только за содержание ответа, но и за каналы, права, окружение, источники данных и последствия действий агента.
Эта смена связана с развитием long-horizon и agentic systems, то есть систем, которые выполняют не одну реплику, а последовательность шагов. Чем длиннее траектория, тем больше возможностей для ошибки: модель может неверно интерпретировать промежуточный результат, прочитать недоверенную инструкцию, использовать инструмент не по назначению или принять ложный сигнал успеха. Elevated Risk label не решает эти проблемы сам по себе, но делает их видимыми в продукте.
Сильный тезис здесь такой: OpenAI начинает маркировать не только контент, но и условия, в которых контент становится действием. Это особенно значимо для Codex, browsing, агентного режима и enterprise-агентов. Там опасность не исчерпывается тем, что модель напишет плохой текст. Опасность в том, что она может отправить запрос, изменить файл, использовать секрет или сделать вывод на основе манипулятивного источника.
При этом нельзя говорить, что OpenAI полностью решила prompt injection или нашла универсальную safety-модель для агентов. Наоборот, смысл Elevated Risk label в том, что компания признаёт остаточный риск и выделяет его отдельной меткой. Это честнее, чем прятать проблему за общим словом безопасно, но такая схема также переносит часть ответственности на пользователя, администратора и разработчика интеграции.
На практике safety-позиция OpenAI становится менее похожей на один фильтр и больше похожей на систему управления риском. В ней есть модель, интерфейс, предупреждение, права доступа, сетевые политики, sandbox, approvals, тестовые сценарии и правила эскалации. Каждый слой закрывает только часть проблемы, но вместе они дают более реалистичную картину безопасности агентных продуктов.
Для рынка это важный сигнал. Чем больше AI-системы работают как агенты, тем меньше подходит старая метафора чат-бота. Пользователь уже не просто спрашивает, а делегирует часть действия. Поэтому вопрос доверия смещается с общего бренда модели к конкретной конфигурации: какой режим включён, какие инструменты доступны, что считается доверенным источником и кто подтверждает опасные операции.
Границы интерпретации: что пока не доказано
Первое ограничение: Elevated Risk labels не являются независимым аудитом безопасности. Если OpenAI ставит или снимает ярлык, это решение компании, основанное на её оценке риска. В справочной статье указано, что ярлык может быть удалён, когда риски сочтут reasonably mitigated, то есть разумно сниженным. Но публичная страница не раскрывает полный набор критериев, по которым принимается такое решение.
Второе ограничение: ярлык не равен технической защите. Он предупреждает и классифицирует функцию, но сам по себе не останавливает prompt injection. Защиту дают конкретные меры: запрет сетевого доступа, sandbox, подтверждение действий, ограничения на файлы, логирование и человеческая эскалация. Без них маркировка может превратиться в формальность.
Третье ограничение: независимый контекст показывает активность угроз, но не даёт универсальной статистики риска для каждого пользователя OpenAI. Материалы Wired и Ars Technica полезны как подтверждение класса проблем, однако они описывают разные сценарии: плагины, пользовательские GPT, defensive prompt injection-подходы и агентные риски. Из них нельзя автоматически вывести вероятность атаки в конкретной компании.
Наконец, в выбранных источниках нет прямой российской привязки к Elevated Risk labels. Поэтому для русскоязычного читателя корректнее рассматривать тему как отраслевой кейс управления риском AI-агентов, а не как инструкцию по включению конкретной функции в России. Практическое значение всё равно есть: международные команды, зарубежные подразделения и разработчики, работающие с агентными системами, сталкиваются с теми же классами угроз.
Ещё одна граница касается самой новостной формулировки. Наличие страницы в новостной выдаче и справочного материала не доказывает, что именно в этот день вышел полноценный новый продуктовый релиз. Поэтому в статье не стоит строить драму на внезапном запуске. Надёжнее описывать событие как закрепление и развитие публичной схемы маркировки риска.
Также не стоит делать из Elevated Risk labels универсальный рейтинг опасности OpenAI-продуктов. В доступных источниках речь идёт о функциях и возможностях, а не о том, что вся модель или весь ChatGPT получает один общий риск-класс. Это различие защищает от неправильного вывода: будто метка автоматически характеризует все сценарии использования.
Что это означает на практике
Если в ChatGPT, Codex или другом продукте OpenAI функция помечена Elevated Risk, это не декоративная иконка. Она означает, что OpenAI сама выделяет для этой возможности дополнительный риск, обычно связанный с недоверенным контентом и prompt injection.
Не путайте ярлык с блокировкой. Elevated Risk предупреждает о классе риска, но не гарантирует защиту. Для реального снижения риска нужны ограничения сети, sandbox, approvals, минимальные права и контроль доступа к файлам.
Для кодовых агентов отдельно проверяйте, какие директории доступны, может ли агент ходить в интернет, где лежат credentials и какие команды требуют подтверждения. Именно эти настройки превращают абстрактную безопасность в рабочую модель угроз.
Для enterprise-внедрений полезна логика Presence: заранее описанные политики, разрешённые действия, тестовые сценарии, метрики качества и правила передачи человеку. Агент без правил эскалации опаснее, чем кажется в демонстрации.
Не подавайте внутренние или продуктовые метрики OpenAI как независимую проверку. Например, заявленные 75% inbound issues без человека в Presence показывают масштаб применения, но не заменяют внешний аудит безопасности.
Для русскоязычных команд главный вывод не в том, как включить конкретную кнопку, а в том, как проектировать агентные AI-сценарии: разделять доверенные и недоверенные источники, ограничивать инструменты и заранее планировать реакцию на prompt injection.
Чек-лист для команды, которая включает агентные функции
Эту памятку стоит использовать перед включением агентного режима, сетевого доступа, коннекторов или кодового ассистента с правом работать в репозитории. Она не заменяет аудит безопасности, но помогает быстро увидеть, где риск спрятан не в тексте ответа, а в возможностях среды.
1. Опишите доступ агента
Сначала зафиксируйте, что агент реально видит и какие источники считает рабочим контекстом. В агентных сценариях риск часто появляется не в запросе пользователя, а в документе, веб-странице, комментарии к коду или другом недоверенном материале.
- Перечислите все источники данных, которые читает агент.
- Отделите доверенные источники от недоверенных.
- Проверьте, видит ли агент файлы с секретами, токенами или внутренними настройками.
- Определите, какие директории и репозитории доступны по умолчанию.
- Запишите, какие внешние страницы и сервисы агент может открывать.
2. Ограничьте инструменты и сеть
После описания доступа проверьте, какие действия агент способен выполнить. Главная ошибка здесь: считать, что хороший ответ модели автоматически означает безопасное действие в среде.
- Отключите ненужный сетевой доступ.
- Используйте sandbox для кода и файловых операций.
- Ограничьте команды, которые можно запускать без подтверждения.
- Проверьте, может ли агент отправлять данные наружу.
- Настройте минимально необходимые права вместо широкого доступа.
3. Настройте подтверждения и эскалацию
Для агентных систем важен момент остановки. Если агент не знает, когда должен передать задачу человеку, он может продолжить цепочку действий на основе сомнительного контекста.
- Определите операции, которые всегда требуют ручного подтверждения.
- Задайте правила передачи задачи человеку.
- Проверьте, как фиксируются действия агента в журналах.
- Разделите черновые рекомендации и реальные изменения в системе.
- Проводите тесты на недоверенном контенте до расширения доступа.
4. Не переоценивайте ярлык риска
Elevated Risk label полезен как сигнал, но не должен становиться заменой инженерной и организационной защиты. Метка говорит, что риск признан, а не что он закрыт.
- Не считайте ярлык технической защитой сам по себе.
- Не снимайте ограничения только потому, что функция официальная.
- Не используйте заявленные продуктовые метрики как внешний аудит безопасности.
- Проверяйте настройки доступа после каждого существенного изменения процесса.
- Возвращайтесь к модели угроз, если агент получает новые инструменты.
Вывод
Elevated Risk labels выглядят маленькой деталью интерфейса, но фиксируют заметный сдвиг в безопасности OpenAI. Компания всё чаще имеет дело не с чат-ботом, который отвечает на вопрос, а с агентом, который читает внешние данные, использует инструменты и может повлиять на реальные системы. В такой архитектуре риск нельзя свести к модерации текста.
По факту OpenAI не объявила, что решила prompt injection. Напротив, смысл маркировки в признании: отдельные возможности остаются достаточно рискованными, чтобы выделять их в продукте, давать ранний доступ осознанно и дополнять предупреждения техническими ограничениями. Это более зрелая, но и более сложная позиция: безопасность становится не одним фильтром, а набором решений на уровне модели, интерфейса, сети, sandbox и корпоративного управления.
Для пользователей и компаний главный вопрос теперь звучит не можно ли доверять ChatGPT вообще, а точнее: какой режим включён, какие инструменты доступны, какие данные видит агент и кто отвечает за действие, если недоверенный контент заставил систему свернуть не туда. Elevated Risk labels не дают окончательного ответа. Но они заставляют задавать правильные вопросы до инцидента, а не после него.
Источники
- OpenAI Help Center: Elevated Risk labels
- OpenAI: Introducing OpenAI Presence
- OpenAI News: Elevated Risk labels
- OpenAI: Introducing Lockdown Mode and Elevated Risk labels in ChatGPT
- Ars Technica: Now defenders are embracing the prompt injection too
- Wired: ChatGPT prompt injection attack security
- Ars Technica: OpenAI spills technical details about how its AI coding agent works
- Wired: ChatGPT plugins security privacy risk
Частые вопросы
Что такое Elevated Risk labels у OpenAI?
Это ярлык для функций и возможностей ChatGPT, Codex и связанных продуктов, которые создают повышенный риск безопасности. В доступных источниках речь идёт не о маркировке каждого ответа, а о capability: например, агентном режиме, сетевом доступе, работе с внешними источниками, файлами или инструментами.
Elevated Risk label означает, что функция заблокирована?
Нет. Ярлык предупреждает о повышенном риске и помогает пользователю или администратору осознанно включать функцию. Сам по себе он не заменяет технические меры вроде sandbox, ограничения сети, подтверждения действий и контроля доступа к файлам.
Почему OpenAI выделяет prompt injection как главный риск?
Потому что агентные функции читают недоверенный контент: сайты, документы, репозитории, тикеты, сообщения из коннекторов. Вредоносная инструкция может быть спрятана внутри такого контента и повлиять на действия модели, особенно если у неё есть доступ к инструментам.
Как связаны Elevated Risk labels и Lockdown Mode?
Elevated Risk label сообщает о повышенном риске функции, а Lockdown Mode показывает практическую сторону контроля: ограничение сетевого контура и возможностей среды, чтобы снизить последствия, если агент столкнётся с вредоносной инструкцией.
Что это значит для Codex и кодовых агентов?
Кодовый агент полезен, когда видит репозиторий, документацию, тесты и среду исполнения. Но вместе с этим растёт риск: агент может читать секреты, менять файлы, запускать команды и взаимодействовать с сетью. Поэтому важны sandbox, сетевые политики, рабочие директории и approval flows.
Можно ли считать Elevated Risk labels независимым аудитом безопасности?
Нет. Это маркировка OpenAI, основанная на оценке компании. Она полезна как сигнал о признанном риске, но не раскрывает полный набор критериев и не заменяет независимую проверку безопасности.
Практический чек-лист
Памятка: как проверять агентные функции с повышенным риском
PDF для downloads/checklist.pdf должен повторять практический чек-лист из статьи: доступ агента, инструменты и сеть, подтверждения и эскалация, ограничения ярлыка риска.
Опишите доступ агента
- Перечислите все источники данных, которые читает агент.
- Отделите доверенные источники от недоверенных.
- Проверьте доступ к секретам, токенам и внутренним настройкам.
- Определите доступные директории и репозитории.
- Запишите внешние страницы и сервисы, которые агент может открывать.
Ограничьте инструменты и сеть
- Отключите ненужный сетевой доступ.
- Используйте sandbox для кода и файловых операций.
- Ограничьте команды, которые можно запускать без подтверждения.
- Проверьте, может ли агент отправлять данные наружу.
- Настройте минимально необходимые права.
Настройте подтверждения и эскалацию
- Определите операции, которые всегда требуют ручного подтверждения.
- Задайте правила передачи задачи человеку.
- Проверьте журналирование действий агента.
- Разделите черновые рекомендации и реальные изменения в системе.
- Проводите тесты на недоверенном контенте до расширения доступа.
Не переоценивайте ярлык риска
- Не считайте Elevated Risk label технической защитой сам по себе.
- Не снимайте ограничения только потому, что функция официальная.
- Не используйте продуктовые метрики как внешний аудит безопасности.
- Проверяйте настройки доступа после существенных изменений процесса.
- Возвращайтесь к модели угроз, если агент получает новые инструменты.
Вопросы и ответы
Что такое Elevated Risk labels у OpenAI?
Это ярлык для функций и возможностей ChatGPT, Codex и связанных продуктов, которые создают повышенный риск безопасности. В доступных источниках речь идёт не о маркировке каждого ответа, а о capability: например, агентном режиме, сетевом доступе, работе с внешними источниками, файлами или инструментами.
Elevated Risk label означает, что функция заблокирована?
Нет. Ярлык предупреждает о повышенном риске и помогает пользователю или администратору осознанно включать функцию. Сам по себе он не заменяет технические меры вроде sandbox, ограничения сети, подтверждения действий и контроля доступа к файлам.
Почему OpenAI выделяет prompt injection как главный риск?
Потому что агентные функции читают недоверенный контент: сайты, документы, репозитории, тикеты, сообщения из коннекторов. Вредоносная инструкция может быть спрятана внутри такого контента и повлиять на действия модели, особенно если у неё есть доступ к инструментам.
Как связаны Elevated Risk labels и Lockdown Mode?
Elevated Risk label сообщает о повышенном риске функции, а Lockdown Mode показывает практическую сторону контроля: ограничение сетевого контура и возможностей среды, чтобы снизить последствия, если агент столкнётся с вредоносной инструкцией.
Что это значит для Codex и кодовых агентов?
Кодовый агент полезен, когда видит репозиторий, документацию, тесты и среду исполнения. Но вместе с этим растёт риск: агент может читать секреты, менять файлы, запускать команды и взаимодействовать с сетью. Поэтому важны sandbox, сетевые политики, рабочие директории и approval flows.
Можно ли считать Elevated Risk labels независимым аудитом безопасности?
Нет. Это маркировка OpenAI, основанная на оценке компании. Она полезна как сигнал о признанном риске, но не раскрывает полный набор критериев и не заменяет независимую проверку безопасности.