**Бульбашка AGI втрачає пару** *Охолодження* Модель OpenAI, що готується до випуску, під кодовою назвою Orion, виявилась не такою ефективною, показуючи менше прогресу, ніж GPT-4 порівняно зі своїм попередником GPT-3. Bloomberg повідомляє, що деякі дослідники OpenAI вважають, що відсутні покращення, особливо в сферах, таких як програмування. Крім того, нова модель Gemini від Google не відповідає внутрішнім очікуванням, а графік випуску довгоочікуваного Anthropic Claude 3. 5 Opus залишається невизначеним. Ці виклики свідчать, що нинішній метод поліпшення AI моделей через "масштабування" може досягати своїх меж. Продовження цих витратних розробок без значних поліпшень може передбачати економічні труднощі, якщо метою є досягнення загального штучного інтелекту. Згідно з Маргарет Мітчелл, головним спеціалістом з етики в AI стартапі Hugging Face, "Бульбашка AGI трохи лускається", натякаючи, що для досягнення людської інтелекту та універсальності можуть знадобитися нові підходи до навчання. *Жадібна технологія* Стратегія росту для генеративного AI здебільшого була масштабуванням: збільшенням потужності моделей шляхом їх розширення, що включає більше обчислювальної потужності від таких компаній, як Nvidia, та використання великих обсягів навчальних даних, отриманих через веб-скрапінг. Однак, із зростанням моделей зростають і їх енергетичні потреби. Витрати великі—Microsoft, наприклад, розглядає можливість відновлення атомних електростанцій для підтримки своїх AI датацентрів.

З відсутністю безкоштовних навчальних даних, технологічні компанії звертаються до синтетичних даних, але все ще стикаються з труднощами отримання унікальних, високоякісних наборів даних без участі людини, як зазначила Ліла Третіков, голова AI стратегії в New Enterprise Associates. Щоб ілюструвати ці витрати: генеральний директор Anthropic Даріо Амодеї зазначив у подкасті, цитованому Bloomberg, що розробка передової AI моделі наразі коштує близько $100 мільйонів, з прогнозами підвищення цих витрат понад $10 мільярдів до 2027 року. *Найкращі дні позаду* Цього року Anthropic обновила свої моделі Claude, не випускаючи Opus, і всі згадки про близький реліз були зняті з його сайту. Згідно з Bloomberg, Opus показав лише незначні покращення стосовно своїх розміру та вартості. Так само і програмне забезпечення Gemini від Google не відповідає очікуванням, і значні досягнення в його моделі великої мови відсутні. Ці перешкоди не є неподоланними, але здається малоймовірним, що AI індустрія зможе підтримувати темпи швидкого розвитку, які спостерігалися останнє десятиліття. "Ми були дуже схвильовані протягом короткого періоду дуже швидкого прогресу", сказав Ноа Джансіракуза, доцент математики в Університеті Бентлі для Bloomberg. "Це просто не було стійким". Для більше інформації про AI: експерт попереджає про неминучу кризу, оскільки покращення AI досягають стіни.