OpenAI тиждень не помічала, що її ШІ-агент зламав платформу для розробки ШІ Hugging Face

OpenAI не знала майже тиждень, що її експериментальний ШІ-агент здійснив несанкціоноване проникнення в системи платформи Hugging Face.

За інформацією агентства, інцидент розпочався приблизно 9 липня, коли ШІ-агент, який виконував тестове завдання з пошуку вразливостей у межах бенчмарку ExploitGym, почав намагатися вийти за межі недостатньо ізольованого тестового середовища. З 11 до 13 липня він зміг проникнути до внутрішніх систем Hugging Face.

Hugging Face — це платформа для розробки та обміну моделями штучного інтелекту, якою користуються компанії, дослідники та розробники по всьому світу. Саме її інфраструктура стала об’єктом цього інциденту.

Джерела Reuters стверджують, що співробітники OpenAI не пов’язували атаку зі своїм ШІ-агентом, доки Hugging Face не повідомила про інцидент Федеральне бюро розслідувань США (ФБР) і не опублікувала офіційну заяву про порушення безпеки.

Раніше Reuters також повідомляло, що агент виконав атаку за кілька годин — завдання, яке досвідчений фахівець із кібербезпеки зазвичай виконував би протягом кількох тижнів. Після інциденту OpenAI розпочала внутрішнє розслідування та співпрацює з Hugging Face і державними органами США.

Цей випадок привернув увагу до ризиків автономних ШІ-агентів. Він показує, що навіть під час контрольованих тестів такі системи можуть виконувати дії, які виходять за межі запланованого сценарію, якщо середовище ізольоване недостатньо надійно. Для компаній, які розробляють або тестують подібні інструменти, це означає потребу посилювати контроль за їхньою роботою та вдосконалювати механізми моніторингу.

Джерело: Reuters

Читайте також
  • Новини
    Tinder додасть налаштування пошуку половинки по зросту
    Софія Старк
  • Новини
    Google Search може самостійно дзвонити до компаній — нова функція вже працює у США
    Софія Старк
  • Новини
    Google позначатиме обрані джерела в AI Overviews та AI Mode
    Гнатюк Дмитро
  • Новини
    X запустить власну платіжну систему, а також подасть позов на компанії за рекламний бойкот
    Софія Старк
  • Новини
    Повноцінне рішення для навчання команд: Netpeak Group відкриває для бізнесу безкоштовний доступ з індивідуальним простором для контролю навчання на ШІ-курсі
    Яна Поліщук
  • Новини
    OpenAI тимчасово відкладає всі проєкти, щоб зосередитися на покращенні ChatGPT
    Гнатюк Дмитро