Адвокати безпеки штучного інтелекту закликають до відтворення розрахунків ядерного випробування Оппенгеймера для надзвичайно потужних систем

Компанії, що займаються штучним інтелектом, отримали заохочення до відтворення розрахунків безпеки, які інформували про перший ядерний тест Роберта Оппенгаймера, перед випуском надпотужних систем. Макс Тегмарк, видатна фігура в галузі безпеки ШІ, зізнався, що він провів розрахунки, подібні до тих, що здійснив американський фізик Артур Комpton перед тестом Трінті. Тегмарк встановив, що ймовірність того, що високорозвинений штучний інтелект може становити існуючу загрозу, становить 90%. Уряд США у 1945 році продовжив тест Трінті після запевнень, що ймовірність того, що атомна бомба підпалить атмосферу і загрожуватиме людству, є знівельовано малою. У статті, написаній Тегмарком і трьома його студентами з MIT, рекомендується обчислити «Константу Комтона», яка визначається як ймовірність того, що всесильний штучний інтелект втече з-під людського контролю. Комтон у 1959 році під час інтерв'ю з американською письменницею Перл Бак заявив, що схвалив тест після оцінки шансів на втечу реакції синтезу «більш-менш менше» ніж один до трьох мільйонів. Тегмарк стверджує, що компанії, що розробляють суперінтелект, мають нести відповідальність за ретельне визначення того, чи ЗСІ—теоретична система, яка перевершує людський розум у всіх сферах—втече з-під контролю людини. «Компанії, які створюють суперінтелект, повинні обчислити константу Комтона, ймовірність того, що ми втратимо контроль над нею», — заявив він. «Немає достатньо просто казати «ми почуваємося добре».
Вони повинні обчислити відсоток. » Тегмарк запропонував, що консенсус щодо константи Комтона, отриманий від кількох компаній, сприятиме створенню «політичної волі» для встановлення глобальних стандартів безпеки штучного інтелекту. Як професор фізики та дослідник ШІ у MIT, Тегмарк співзаснував Інститут майбутнього життя — неприбуткову організацію, що просуває безпечний розвиток ШІ. У 2023 році інститут опублікував відкритого листа із закликом призупинити створення потужних ШІ. Під листом підписалися понад 33 000 осіб, зокрема Ілон Маск — один із ранніх прихильників інституту — та співзасновник Apple Стів Возняк. Цей лист, випущений через кілька місяців після релізу ChatGPT, який відкрив нову еру розвитку ШІ, застеріг, що лабораторії штучного інтелекту беруть участь у «виході з-під контролю гонці» щодо розгортання «все більш потужних цифрових розумів», яких ніхто не може «зрозуміти, передбачити або надійно контролювати». Тегмарк прокоментував у газеті Guardian, що разом з групою експертів у галузі ШІ — включаючи фахівців галузі технологій, представників державних агентств безпеки і вчених — розробляється новий підхід до безпечного розвитку ШІ. Звіт «Консенсус Сінгапуру щодо пріоритетів досліджень глобальної безпеки ШІ», підготовлений Тегмарком, провідним комп'ютерним вченим Йошуа Бенгіо та працівниками провідних компаній із ШІ, таких як OpenAI та Google DeepMind, окреслює три ключові напрями досліджень: розробка методів виміру впливу поточних та майбутніх систем ШІ; визначення бажаної поведінки ШІ та розробка систем для її досягнення; та управління і контроль поведінки ШІ. Згадавши про цей звіт, Тегмарк зазначив, що рух за безпечний розвиток ШІ отримав новий поштовх після нещодавнього урядового саміту з ШІ у Парижі, де віцепрезидент США Джейден Ванс заперечував занепокоєння щодо безпеки, заявляючи, що майбутнє ШІ «не буде вирішено безтурботністю щодо безпеки». Тегмарк сказав: «Дійсно відчутно, що похмурість із Парижа пройшла, і міжнародна співпраця знову набрала сили».
Brief news summary
Експерт з безпеки штучного інтелекту Макс Тегмарк, професор фізики Массачусетського технологічного інституту та співзасновник Інституту майбутнього життя, закликає запровадити жорсткі розрахунки безпеки, подібні до тих, що проводились перед ядерним випробуванням у Трініті в 1945 році, підкреслюючи існіні загрози, які несе розвинений ШІ. Провівши паралелі з історичною оцінкою Артура Комптона, Тегмарк оцінює ймовірність у 90%, що надрозумний штучний інтелект може втекти з-під контролю людини й загрожувати людству. Він пропонує створити “Константу Комптона” — кількісну міру ризику для неконтрольованого ШІ, яка допоможе інформувати політичні рішення та глобальні угоди з безпеки. Ці зусилля співпадають із відкритим листом Інституту майбутнього життя 2023 року, підписаним понад 33 000 осіб, у тому числі Ілоном Маском і Стівом Возняком, який попереджає про неконтрольовану гонку у розвитку ШІ. Тегмарк також долучився до формулювання Сінгапурського консенсусу щодо пріоритетів глобальних досліджень у безпеці ШІ, з метою спрямувати важливі дослідження безпеки у всьому світі. Незважаючи на деякий скепсис з боку американських посадовців, міжнародне співробітництво та оптимізм щодо безпечного розвитку ШІ залишаються сильними.
AI-powered Lead Generation in Social Media
and Search Engines
Let AI take control and automatically generate leads for you!

I'm your Content Manager, ready to handle your first test assignment
Learn how AI can help your business.
Let’s talk!

Розумні контракти: Майбутнє автоматизованих ділов…
Розумні контракти революціонізують бізнес-угоди, автоматизуючи їх виконання та зменшуючи залежність від посередників.

SoftBank повідомляє про несподіваний прибуток у 3…
SoftBank Group повідомила про несподіваний чистий прибуток у розмірі 3,5 мільярда доларів (517,2 мільярда йень) у своєму четвертому фінансовому кварталі, перевищивши очікування аналітиків щодо збитків і значно покращившись порівняно з прибутком у 231 мільярд йень за цей же період минулого року.

Токен HUMO на основі блокчейну, забезпечений держ…
Ташкент, Узбекистан, 13 травня 2025 року – Узбекистан запускає пілотний проект нового токена, що забезпечений активами, під назвою HUMO, який буде прив’язаний до урядових облігацій.

Перемога Трампа на Саудівській виставці спростову…
Під час недавнього візиту до Саудівської Аравії колишній президент Дональд Трамп оголосив про різке збільшення інвестиційних угод між США і Саудівською Аравією на суму понад 600 мільярдів доларів.

Передбачаються труднощі для обіцянки блокчейну що…
MobiHealthNews: Щодня надходять найновіші оновлення у цифровому здоров'ї прямо на вашу електронну пошту

Дональд Трамп оголошує про угоди на 600 мільярдів…
Під час високопрофільного візиту до Саудівської Аравії колишній президент США Дональд Трамп оголосив про низку амбітних угод на суму приблизно 600 мільярдів доларів, що охоплюють сфери оборони, штучного інтелекту (ШІ) та інших галузей.

Роль блокчейну у покращенні цифрових платежів
FinTech Daily надає всебічний огляд трансформативного впливу технології блокчейн на системи цифрових платежів у всьому світі.