Google DeepMind запустила інститут для дослідження розвитку AGI та безпеки ШІ

Google і Google DeepMind запустили DeepMind Institute — дослідницький інститут, який зосередиться на розвитку штучного загального інтелекту (AGI) та його можливому впливі на суспільство. До керівництва інституту увійшли співзасновник DeepMind Шейн Легг, керівник Google Джеймс Маніка та співзасновник і CEO Google DeepMind Деміс Гассабіс.

Інститут має стати майданчиком для різних поглядів на розвиток AGI всередині Google, Google DeepMind і світової дослідницької спільноти. Автори проєкту зазначають, що учасники можуть не погоджуватися між собою та змінювати позиції з появою нових даних.

Разом із запуском DeepMind Institute опублікував перші чотири матеріали. Вони присвячені економічній політиці в умовах розвитку AGI, прозорості роботи ШІ-моделей, принципам взаємодії людини зі штучним інтелектом та способам оцінювання найпотужніших моделей.

В одному з матеріалів дослідники безпеки Google DeepMind Рохін Шах та Анка Драган розглянули проблему прозорості міркувань ШІ. Йдеться про можливість перевірити послідовність дій, за допомогою яких модель формує відповідь. На думку авторів, розробникам і регуляторам варто враховувати цю характеристику під час створення нових систем та оцінювання їхньої безпеки.

Дослідники пропонують, зокрема, обмежувати обсяг послідовних обчислень, які модель може виконувати без зрозумілого для людини пояснення. Інший варіант — вимагати від розробників підтвердження, що менш прозорі моделі все одно можна належно контролювати.

Окрему пропозицію представив Деміс Гассабіс. Він описав концепцію американської організації зі стандартизації та оцінювання передових ШІ-моделей. За його задумом, спочатку компанії могли б добровільно передавати моделі на перевірку не пізніше ніж за 30 днів до випуску.

Якщо система оцінювання доведе ефективність, проходження таких перевірок у майбутньому може стати обов’язковою умовою для запуску передових моделей у США. Спочатку організація могла б створювати методики разом із ШІ-компаніями, а згодом перейти до незалежних тестів, зміст яких розробники не знатимуть заздалегідь. Це має зменшити можливість спеціально налаштовувати моделі під відомі критерії перевірки.

Гассабіс також допускає посилення таких правил, якщо ризики від розвитку ШІ зростатимуть. Серед можливих заходів він назвав скоординоване уповільнення розробки найпотужніших моделей.

Запуск DeepMind Institute відбувається на тлі ширшої дискусії в ШІ-галузі про способи контролю передових моделей. Компанії та дослідники дедалі частіше обговорюють конкретні механізми: незалежне тестування, розкриття інформації про системи та правила їхнього запуску.

Джерело: TechCrunch

Читайте також
  • Новини
    Meta й Internet Society інвестують $30 млн у розширення доступу до інтернету
    Яна Поліщук
  • Новини
    YouTube дозволив заблокованим кріейторам подати запит на створення нового каналу
    Гнатюк Дмитро
  • Новини
    Спека змінила купівельні звички українців: вентилятори вперше за три роки увійшли до топ-10 покупок
    Яна Поліщук
  • Новини
    Spotify дозволив бачити яку музику слухають інші користувачі в реальному часі
    Гнатюк Дмитро
  • Новини
    На відео TikTok з’являться примітки з перевіркою фактів від користувачів
    Яна Поліщук
  • Новини
    ШІ-модель Meta під час тестування отримала доступ до інтернету та зламала сторонній сервіс
    Гнатюк Дмитро