Результати видачі SearchGPT можна змінити за допомогою прихованого тексту

Дослідники виявили вразливість ChatGPT до маніпуляцій

Дослідники британського видання The Guardian виявили, що новий ШІ-пошуковик ChatGPT Search, який запустили цього місяця, має вразливість до маніпуляцій. Штучний інтелект можна змусити ігнорувати негативні відгуки та створювати лише позитивні підсумки, якщо на сайті розміщено прихований текст.

ChatGPT Search створений для пришвидшення пошуку, зокрема через підсумовування оглядів чи інших матеріалів із сайтів. Проте дослідження показало, що ця функція стає вразливою до маніпуляцій — це дозволяє не лише редагувати підсумки, але й генерувати шкідливий код.

Подібні способи маніпуляції вже відомі як ризики для мовних моделей, але в роботі реального пошукового сервісу їх виявили вперше. У виданні The Guardian нагадали, що Google, як лідер на ринку пошуку, має значно більше досвіду у боротьбі з подібними загрозами.

Представники компанії OpenAI поки не коментували цей випадок. Однак компанія заявила, що постійно вдосконалює систему безпеки та застосовує механізми для блокування шкідливих сайтів.

Виявлена вразливість ChatGPT Search демонструє ризики, пов’язані з використанням ШІ для обробки інформації. Відповідно цей випадок підкреслює: важливо завжди перевіряти дані, навіть якщо вони згенеровані високотехнологічними системами.

Джерело: TechCrunch

Читайте також
  • Новини
    Google дозволить відстежувати появу своїх паспортів і водійських посвідчень у пошуку
    Гнатюк Дмитро
  • Новини
    Google Merchant Center додає розділ Creative Content для керування товарними відео
    Гнатюк Дмитро
  • Новини
    Google AI Mode тепер виконуватиме дії у Canva, YouTube та Instacart
    Гнатюк Дмитро
  • Новини
    Apple готує нову систему ШІ, яка вчиться на реальних email
    Софія Старк
  • Новини
    YouTube тестує новий інструмент для кріейторів на основі ШІ
    Ольга Беспалько
  • Новини
    ЄС розслідує, чи дотримується Google правил захисту даних під час навчання ШІ
    Ольга Беспалько