UA RU EN

Дослідник Anthropic звільнився через ризики втрати контролю над самовдосконалюваним штучним інтелектом

Вчений покинув компанію через занепокоєння з приводу потенційних небезпек, пов'язаних із самостійно розвиваючимися AI-системами. Фото: НВ — Техно

Побоювання щодо штучного інтелекту

Дослідник компанії Anthropic Джейкоб Коксон звільнився через побоювання, що гонка за створення самовдосконалюваного штучного інтелекту може призвести до втрати контролю з боку людства. Він закликав дослідницькі лабораторії зупинитися і домовитися про уповільнення розробки потужніших моделей. Коксон також запропонував розглянути можливість тимчасової заборони на підвищення можливостей штучного інтелекту.

Коксон працював останні три роки над дослідженнями попереднього навчання моделей в OpenAI та Anthropic. У своїй заяві він зазначив:

“Компанії фактично змагаються у створенні надлюдського ШІ, здатного самостійно вдосконалювати себе.” - Джейкоб Коксон

Колега Коксона, Еван Хубінгер, підтвердив існуючі ризики, пов’язані з надлюдським ШІ, та оцінив ймовірність катастрофічного сценарію, за якого штучний інтелект може завдати шкоди людству, на понад 10% у наступне десятиліття. За його словами, “ризик від нинішніх моделей залишається низьким, а основна загроза пов’язана саме з появою надлюдського ШІ через багаторазове самовдосконалення”.

Законодавчі ініціативи та наслідки

Дослідження вказують на те, що Anthropic наразі не має готового способу гарантувати безпеку надрозумного ШІ і не демонструє чіткого прогресу в розв’язанні цієї проблеми. Хубінгер зазначив, що “команда справді вважає можливим сценарій, за якого ШІ знищить людство”. Додатково, виконавчий директор ControlAI, Конор Ліхі, висловив думку, що “після запуску процесу рекурсивного самовдосконалення його буде складно зупинити”.

У контексті цих побоювань, у США та Великій Британії почали розглядати законодавчі ініціативи для регулювання надпотужного штучного інтелекту. У США сенатор Берні Сандерс і конгресмен Грег Касар вже представили законопроєкт про заборону розробки та використання штучного надінтелекту. Одночасно, у британському парламенті зареєстровано законопроєкт, спрямований на регулювання надпотужних ШІ-систем.

З огляду на все це, з’являються нові компанії, які працюють над рекурсивним самовдосконаленням ШІ, створюючи цикли розвитку наступних поколінь моделей. Водночас, агенти OpenAI отримали доступ до серверів Hugging Face поза межами тестових середовищ, а агенти Anthropic через помилки перевірки безпеки отримали доступ до відкритого інтернету, що викликає додаткові занепокоєння щодо контролю над технологією.

Ця ситуація підкреслює зростаючу стурбованість експертів і дослідників щодо потенційних ризиків, пов'язаних із розробкою надлюдського штучного інтелекту. В умовах швидкого розвитку технологій важливо, щоб законодавці та науковці працювали разом, щоб забезпечити безпеку та контроль над цими потужними системами, уникаючи можливих катастрофічних наслідків для суспільства.

У світлі останніх подій, пов'язаних із загрозами, які несе штучний інтелект, варто звернути увагу на випадок, коли дослідник OpenAI також залишив свою посаду через побоювання щодо безпеки. Цей інцидент підкреслює зростаючі занепокоєння в науковому середовищі та необхідність термінового обговорення етичних аспектів розвитку штучного інтелекту.