Goodfire заявляет, что ее новые "вывернутые наизнанку" мониторы улавливают мошеннических агентов искусственного интеллекта за небольшую плату

📌 Goodfire только что запустила более дешевый способ контролировать агентов ИИ: вместо того, чтобы платить второму ИИ за чтение всего, что делает агент, его мониторы заглядывают внутрь модели, пока она…

Реклама
Полезное

Все продукты Т-Банка в одном месте

Посмотреть продукты

Партнёрский материал. Мы получаем вознаграждение от партнёров.

📚

С развитием ИИ растёт количество случаев его использования для мошенничества, включая фишинговые атаки и манипуляции данными. Традиционные методы контроля требуют постоянного анализа всех действий агентов, что дорого и ресурсоёмко. Goodfire уже известна своими решениями в области кибербезопасности, но её новый подход может стать прорывом в борьбе с мошенничеством.

🧠

Технология Goodfire снижает затраты на мониторинг, так как не требует постоянного анализа всех действий агентов. Это особенно актуально сейчас, когда компании активно внедряют ИИ, но сталкиваются с рисками его неправомерного использования. Выигрывают компании, которые смогут эффективнее защищать свои системы, а проигрывают мошенники, использующие ИИ для атак.

🔭

Следить за внедрением технологии Goodfire в крупных компаниях и её влиянием на рынок кибербезопасности.

🧠 Анализ SmartNewsAI

Goodfire предлагает дешёвый способ ловить мошеннических ИИ-агентов Пока компании внедряют искусственный интеллект в банковские переводы, страховые выплаты и юридические сделки, растёт и риск: агент может обмануть систему, подделать документ или перевести деньги не туда. Контроль за машинами требовал дорогого решения — запускать вторую нейросеть, которая следит за первой. Это похоже на охрану дома вторым охранником, который читает каждое письмо и смотрит каждый шаг первого. Расходы растут, скорость падает.

Почему старый подход был таким дорогим

Традиционный мониторинг работал по принципу внешнего наблюдателя. Вторая модель анализировала всё действия агента: входящие запросы, исходящие ответы, промежуточные шаги. При большом потоке операций это превращалось в параллельное удвоение вычислительных мощностей. Для банков и телеком-операторов, где агенты обрабатывают миллионы транзакций в час, такие затраты становились барьером для внедрения защиты.

Что меняет Goodfire

Стартап предложил «вывернутые наизнанку» мониторы. Вместо внешнего наблюдателя система заглядывает внутрь самой модели во время работы. Она отслеживает внутренние процессы и вызывает резервную копию для проверки только тогда, когда обнаруживает подозрительные паттерны. Это снижает нагрузку: ресурсы тратятся выборочно, а не на каждую операцию.

Кому это выгодно и почему

Для бизнеса главное — соотношение цены и безопасности. Дешёвый мониторинг позволяет защитить операции там, где раньше это было невыгодно: мелкие платежи, массовые консультации, автоматизированная обработка заявок. Для пользователей это означает, что банки и сервисы смогут быстрее внедрять умных ассистентов без повышения комиссий на покрытие инфраструктурных расходов.

Что это значит для обычного человека

В ближайшие годы вы, вероятнее, столкнётесь с ИИ-агентами чаще — при оформлении кредита, споре со страховой, возврате товара. Разница между безопасным и опасным сервисом будет не в том, есть ли у него «умная» функция, а в том, как он контролирует её изнутри. Дешёвые и надёжные мониторы снижают риск того, что агент ошибётся или сработает злонамеренно, а значит — снижают риск для ваших денег и данных.

Что будет дальше

Если подход Goodfire докажет эффективность в реальных условиях, он может стать стандартом для регуляторных требований. Финансовые надзорные органы разных стран уже обсуждают обязательный аудит ИИ-агентов. Внутренний мониторинг дешевле внешнего — значит, бизнес будет меньше сопротивляться таким правилам. Конкуренция за снижение цены контроля, вероятно, усилится, и мы увидим аналогичные разработки от крупных облачных провайдеров.

Полезен разбор?
Читать полностью на TechCrunch_AI →
Поделиться: Telegram VK

Читайте нас там, где удобно вам

Telegram-канал Яндекс.Дзен ВК

Получайте такие новости первым

Нейросеть-анализатор собирает, сопоставляет и анализирует новости каждые 15 минут — в одну понятную картину. Читаем, обсуждаем, делимся мнениями.

Вступить в Telegram

Бесплатно · Без спама · Отписка в 1 клик