Блог

Почему ИИ-агенты не должны вмешиваться в ваш исходный код — и чем им следует заниматься вместо этого

Компания Dynatrace переживает важный момент в своей истории. Она расширяет сферу деятельности, выходя за рамки платформы для мониторинга и выходя на новый уровень, который предполагает конфигурации для автономной эксплуатации и обеспечения безопасности.

В этом выпуске Алоис Рейтбауэр, главный технологический стратег Dynatrace, делится своими прогнозами относительно мира, в котором производственными средами управляет агентный ИИ.

Это интервью, записанное на конференции Dynatrace Perform в конце января, состоялось всего через несколько недель после того, как Dynatrace приобрела DevCycle, платформу для управления функциями. Флаги функций существуют уже несколько десятилетий, но с появлением агентского ИИ они могут получить новую роль в качестве своего рода предохранительного выключателя, останавливающего вышедший из-под контроля ИИ. В некотором смысле это решение, которое все время было у всех на виду.

По словам Рейтбауэра, DevCycle действует как механизм безопасности, позволяющий операциям быть по-настоящему автономными.

«Самым безопасным изменением в среде является не переписывание кода и его развертывание агентом, а изменение конфигурации», — говорит Рейтбауэр.

Вот один запоминающийся фрагмент из интервью:

: Существует большая обеспокоенность тем, что агентский ИИ может принимать решения, которые ему не следует принимать, и принимать решения, имеющие серьезные последствия. Считаете ли вы флаги функций механизмом безопасности?

Рейтбауэр: Это и есть механизм безопасности. Дело не в том, что мы передаем наши производственные среды в ведение ИИ; мы еще не дошли до этого. Но есть много задач, в которых ИИ может принимать решения быстрее и также предпринимать действия быстрее. И это также та обратная связь, которую мы фактически получаем от наших клиентов. Они говорят, что на самом деле считают, что ИИ действует в рамках определенных ограничений и рамок.

«Это могут быть рабочие процессы, которые мы предоставляем через [протокол контекста модели], и агент может выбирать [компании] собственные книги, которые он выбирает, и флаги функций идеально подходят под эту категорию. Вы позволяете агенту изменять некоторые из этих настроек конфигурации, но у вас есть более или менее варианты для выбора. Это очень безопасный механизм.

«Никто не хочет, чтобы агент, обнаружив проблему в производственной среде, самостоятельно принял решение полностью перенастроить систему. Речь идет скорее о том, чтобы сделать правильный выбор. Мы также видим, что у наших клиентов гораздо больше желания двигаться в этом направлении».

Это увлекательное будущее, и Рейтбауэр, похоже, очень внимательно следит за тем, как оно будет складываться.

Читайте также

Подписывайтесь на наш канал в Телеграм

Подписаться
AI Agents