Anthropic pokreće Claude Opus 4 sa naprednim AI sigurnosnim protokolima za sprječavanje zloupotrebe

Dana 22. maja 2025. godine, Anthropic, vodeća firma za istraživanje veće umjetne inteligencije, predstavila je Claude Opus 4, svoj najnapredniji AI model do sada. Uz ovu objavu, kompanija je uvela poboljšane sigurnosne protokole i stroge interne kontrole, vođene rastućim zabrinutostima zbog mogućeg zloupotrebe moćne AI — posebno za kreiranje biološkog oružja i drugih štetnih aktivnosti. Claude Opus 4 predstavlja značajno nadograđeni model u odnosu na ranije Claude modele, s posebno boljim performansama na složenim zadacima. Interni testovi otkrili su njegovu zapanjujuću sposobnost da vodi čak i početnike kroz procedure koje bi mogle biti opasne ili nemoralne, uključujući pomoć u stvaranju biološkog oružja — što je zabrinulo i Anthropic i širu zajednicu AI-a. Kao odgovor, Anthropic je primijenio svoju Politiku odgovornog skaliranja (RSP), sveobuhvatni okvir za etičku primjenu napredne AI. To je uključivalo implementaciju protokola sigurnosti AI nivoa 3 (ASL-3), među najstrožim sigurnosnim i etičkim standardima u industriji. Mjere pod ASL-3 uključuju povećanu sajber sigurnost za sprječavanje neovlaštenog iskorištavanja, sofisticirane sustave za sprječavanje zaobilaženja sigurnosnih ograničenja te specijalizirane klasifikatore upita osmišljene da otkriju i neutraliziraju štetne ili zlonamjerne zahtjeve.
Pored toga, Anthropic je uspostavio program nagrada koji potiče vanjske istraživače i hakerе na identifikaciju ranjivosti u Claude Opus 4, odražavajući suradnički pristup upravljanju rizicima u izazovima zaštite najsavremenije AI od novih prijetnji. Iako je Anthropic izbjegao označiti Claude Opus 4 kao inherentno opasan — priznavši složenost u procjeni rizika AI — kompanija je izabrala preventivni stav primjenom strogih kontrola. Ovaj model može postaviti važan presedan za programere i regulatore u upravljanju primjenom moćnih AI sistema koji bi mogli nanijeti štetu ako se zloupotrijebe. Iako je Politika odgovornog skaliranja voluntarna, Anthropic teži tome da njezini izazovi potaknu šire industrijske standarde i promoviraju zajedničku odgovornost među kreatorima AI. Kombiniranjem rigoroznih sigurnosnih mjera s konkurentnim proizvodom, Anthropic nastoji uravnotežiti inovacije s etičkim upravljanjem — što je teško održivo s obzirom na to da očekivani godišnji prihodi Claude Opus 4 premašuju dvije milijarde dolara i da se nalazi u snažnoj konkurenciji s vodećim AI platformama poput OpenAI-jevog ChatGPT-a. Ove zabrinutosti u vezi sigurnosti i politike pojavljuju se usred pojačanih globalnih rasprava o regulaciji AI. Mnogi stručnjaci predviđaju da će vlade i međunarodne institucije prijeći na strožije propise koji reguliraju razvoj i korištenje napredne AI. Do donošenja i provođenja takvih propisa, interne politike poput onih u Anthropic-u ostaju jedan od rijetkih učinkovitih alata za upravljanje rizicima umjetne inteligencije. Ukratko, lansiranje Claude Opus 4 predstavlja značajan napredak u mogućnostima AI uz povećanu svjesnost o etičkim i sigurnosnim izazovima. Proaktivna posvećenost Anthropic-a snažnim sigurnosnim mjerama predstavlja primjer kojeg će vjerojatno slijediti buduće industrijske norme i regulatorni okviri. Kako modeli AI postaju sve snažniji i svestraniji, zaštita od zloupotrebe postaje sve važnija, ističući hitnu potrebu za koordiniranim naporima u tehnološkoj zajednici kako bi se osigurao odgovoran razvoj i primjena ovih transformacijskih alata.
Brief news summary
Dana 22. maja 2025. godine, Anthropic je predstavio Claude Opus 4, svoj najnapredniji model umjetne inteligencije do sada, što predstavlja veliki preokret u oblasti umjetne inteligencije. Osmišljen za rješavanje složenih zadataka s visokim nivoom stručnosti, Claude Opus 4 također donosi značajne sigurnosne izazove, naročito u vezi s mogućom zloupotrebom u osjetljivim područjima poput razvoja biološkog oružja. Kako bi se suočili s tim rizicima, Anthropic je implementirao stroge sigurnosne mjere u okviru svoje politike odgovornog skaliranja, uključujući protokole razine sigurnosti AI 3, kao što su pojačana cyber sigurnost, zaštite od jailbreak napada i brzi klasifikatori za otkrivanje štetnog sadržaja. Kompanija je također pokrenula program nadoknade za angažiranje vanjskih eksperata u identifikaciji ranjivosti. Iako Claude Opus 4 nije inherentno opasan, Anthropic ističe važnost pažljivog nadzora i etičke primjene. Postavljen da konkurira rivalima poput ChatGPT od OpenAI i očekuje se da će generisati preko 2 milijarde dolara godišnje, Claude Opus 4 naglašava ključni balans između pionirskog razvoja umjetne inteligencije i odgovorne primjene. Ovaj razvoj zahtijeva globalnu saradnju i regulative radi osiguranja sigurnog i etičkog napretka u tehnologiji umjetne inteligencije.
AI-powered Lead Generation in Social Media
and Search Engines
Let AI take control and automatically generate leads for you!

I'm your Content Manager, ready to handle your first test assignment
Learn how AI can help your business.
Let’s talk!

Google pokreće VIP AI pretplatnu uslugu za 250 do…
Google pokreće novu pretplatničku uslugu baziranu na umjetnoj inteligenciji pod nazivom "Google AI Ultra", koja pruža ekskluzivan pristup najnaprednijim AI proizvodima kompanije.

Cijena Chainlinka suočava se s padom od 30% dok r…
Nativna kriptovaluta Chainlinka, LINK, zabilježila je značajan pad tržišne vrijednosti u posljednja 48 sati, s padom od oko 16 posto.

Izvještaj: Apple planira predstaviti pametne naoč…
Navodno, Apple namjerava pokrenuti pamne naočale s umjetnom inteligencijom (AI) namijenjene nadmetanju s Ray-Bansima kompanije Meta.

Zastupnik u SAD-u Tom Emmer predstavlja zakon o b…
Bill pojašnjava da Developeri koji ne čuvaju sredstva nisu prenositelji novca Industrijske grupe podržavaju Zakon o regulativi blockchaina (BRCA) kako bi pomogli SAD-u da održe vodeću poziciju u inovacijama u blockchain tehnologiji

Kupovina Jony Iveove start-up tvrtke od strane Op…
OpenAI je napravio veliki napredak u svojim naporima da potisne umjetnu inteligenciju naprijed, otkupivši preostale dijelove svoje start-up kompanije za dizajn Jonyja Ivea, io, u okviru dogovora o vrijednosti od 5 milijardi dolara putem razmjene dionica.

R3 i Solana sarađuju kako bi omogućili tokenizova…
R3 i Fondacija Solana udružili su snage kako bi uveli regulisane stvarne imovine na javni blockchain.

Kako je listama za ljetno čitanje Generisanim od …
Nekoliko novina širom zemlje, uključujući Chicago Sun-Times i bar jedno izdanje The Philadelphia Inquirer, objavile su syndikovani ljetni popis knjiga koji sadrži potpuno izmišljene naslove, a pripisuju ih poznatim autorima.