lang icon En
Dec. 23, 2025, 9:15 a.m.
311

Izzivi varnosti umetne inteligence: Zakaj se tradicionalne ekipe za kibernetsko varnost težko spopadajo z ranljivostmi AI

Brief news summary

Strokovnjak za varnost umetne inteligence Sander Schulhoff opozarja na pomembno vrzel v kibernetski varnosti: tradicionalne ekipe pogosto nimajo strokovnega znanja za obvladovanje ranljivosti, specifičnih za umetno inteligenco, posebej v velikih jezikovnih modelih, ki odpovejo na načine, ki jih običajne popravke programske opreme ne morejo odpraviti. Medtem ko te ekipe morda zaznajo tehnične pomanjkljivosti, pogosto spregledajo, kako je AI mogoče manipulirati s pomočjo jezika, da sproži zlonamerne ukrepe. Schulhoff poziva k zaposlovanju strokovnjakov, ki so vešči tako varnosti AI kot tudi konvencionalne kibernetske varnosti, da bi učinkovito obvladovali tveganja AI, vključno z varnim upravljanjem zlonamernih kod, ustvarjenih z AI. Kritično ocenjuje številne startup-e s področja varnosti AI, ki ponudijo površinske zaščite, ter napoveduje korekcijo na trgu. Medtem pa tehnološki giganti in vlagatelji povečevajo naložbe v varnost AI, saj prepoznavajo naraščajoča tveganja, ki jih predstavlja integracija AI v oblačne infrastrukture. Na primer, nakup Googla Wiz za 32 milijard dolarjev poudarja vedno večjo potrebo po zanesljivih rešitvah za varnost AI in oblakov v kompleksnih večoblačnih okoljih.

Podjetja imajo lahko vzpostavljene ekipe za kibernetsko varnost, vendar številna ostajajo nepismenna glede načinov, kako AI sistemi dejansko odpovejo, pravi raziskovalec varnosti AI. Sander Schulhoff, avtor ene izmed prvih priročnikov za inženiring ukazov in strokovnjak za ranljivosti AI sistemov, je v nedavno izdani epizodi "Lenny's Podcast", ki je izšla v nedeljo, dejal, da mnoge organizacije nimajo usposobljenega osebja, ki bi razumelo in ublažilo tveganja glede varnosti AI. Tradicionalne ekipe za kibernetsko varnost so usposobljene za odpravljanje napak in obvladovanje znanih ranljivosti, vendar se AI vede drugače. "Popraviš lahko napako, ampak ne moreš popraviti možganov, " je pojasnil Schulhoff in poudaril, da med pristopi varnostnih ekip in kako velike jezovne modele odpovejo, obstaja temeljna razlika. "Obstaja razlika med tem, kako deluje AI, in klasično kibernetsko varnostjo, " je dodal. Ta vrzel postane očitna pri praktičnih implementacijah. Strokovnjaki za kibernetsko varnost lahko pregledajo AI sistem zaradi tehničnih težav, ne pa tudi razmišljajo: "Kaj če nekdo manipulira z AI, da izvede nekaj nepravilnega?" je opazil Schulhoff, ki upravlja platformo za inženiring ukazov in hackathon za rdeče ekipe za testiranje AI. Za razliko od običajne programske opreme je AI sistem mogoče vplivati s pomočjo jezika in subtilnih navodil, je poudaril.

Schulhoff je opozoril, da bi posamezniki, izkušeni tako na področju varnosti AI kot tudi na področju tradicionalne kibernetske varnosti, vedeli, kako ukrepati, če bi bila AI spretno zavedena, da generira zlonamerno kodo — na primer z izvajanjem kode v izoliranem okolju, da preprečijo, da bi AI-jev izhod škodoval širšemu sistemu. Meni, da je združevanje varnosti AI z običajno kibernetsko varnostjo "prihodnostna varnostna služba. " Pojav startupov za varnost AI Schulhoff je prav tako kritiziral številne startupove za varnost AI, ki promovirajo »vodila«, ki ne nudijo resnične zaščite. Ker je manipulacija z AI sistemi mogoča z neskončnimi triki, so trditve, da ti orodji lahko "zajemajo vse, " zavajajoče. "To je popolnoma neresnično, " je dejal in napovedal popravek trga, kjer bo "prihodnje prihodke občutno zmanjšalo za ta vodila in avtomatizirane rdeče ekipe za testiranje. " Startupi za varnost AI so izkoristili močan interes vlagateljev. Tako velike tehnološke družbe kot tudi tveganega kapitala so intenzivno vlagale v to področje, saj se podjetja trudijo zaščititi svoje AI sisteme. Marca je Google kupil startup za kibernetsko varnost Wiz za 32 milijard dolarjev, da bi okrepil svoje storitve za zaščito v oblaku. Direktor Google Sundar Pichai je priznal, da AI prinaša "nove tveganja" v času, ko postajajo vse bolj razširjeni večoblaki in hibridna okolja. "V tem kontekstu organizacije iščejo rešitve za kibernetsko varnost, ki izboljšujejo varnost v oblaku na več platformah, " je dodal.


Watch video about

Izzivi varnosti umetne inteligence: Zakaj se tradicionalne ekipe za kibernetsko varnost težko spopadajo z ranljivostmi AI

Try our premium solution and start getting clients — at no cost to you

I'm your Content Creator.
Let’s make a post or video and publish it on any social media — ready?

Language

Hot news

Dec. 23, 2025, 1:26 p.m.

15 načinov, kako se je prodaja letos spremenila v…

V zadnjih 18 mesecih je ekipa SaaStr globoko posegla na področje umetne inteligence in prodaje, s precejšnjo pospešitvijo začetek junija 2025.

Dec. 23, 2025, 1:23 p.m.

OpenAI GPT-5: Kaj Doslej Vemo

OpenAI se pripravlja na lansiranje GPT-5, naslednjega pomembnega napredka v svoji seriji velikih jezikovnih modelov, in izdaja se pričakuje v začetku leta 2026.

Dec. 23, 2025, 1:20 p.m.

AI v SEO: Preoblikovanje ustvarjanja in optimizac…

Umetna inteligenca (UI) hitro preoblikuje področje ustvarjanja in optimizacije vsebin znotraj optimizacije za iskalnike (SEO).

Dec. 23, 2025, 1:20 p.m.

Rešitve za video konferencing z umetno inteligenc…

Prehod na delo na daljavo je poudaril ključno potrebo po učinkovitih komunikacijskih orodjih, kar je pripeljalo do razcveta rešitev za video konference, ki jih poganjata umetna inteligenca in omogočajo brezhibno sodelovanje na razdalji.

Dec. 23, 2025, 1:17 p.m.

Velikost trga umetne inteligence v medicini, dele…

Pregled Globalno tržišče umetne inteligence v medicini je napovedano, da bo do leta 2033 doseglo približno 156,8 milijard USD, kar je rast iz 13,7 milijard USD leta 2023, pri čemer pričakovana letna stopnja rasti (CAGR) znaša 27,6 % od leta 2024 do 2033

Dec. 23, 2025, 9:30 a.m.

Danny Sullivan in John Mueller od Googla o SEO za…

John Mueller iz Googla je gostil Dannyja Sullivana, prav tako iz Googla, v podcastu Search Off the Record, kjer sta razpravljala o "Mnenjih o SEO in SEO za AI".

Dec. 23, 2025, 9:26 a.m.

Lexus poskuša generativno umetno inteligenco v no…

Poglobljen zapis: Lexus je po poročilu s premirom sprožil praznično marketinško kampanjo, ustvarjeno z uporabo generativne umetne inteligence

All news

AI Company

Launch your AI-powered team to automate Marketing, Sales & Growth

and get clients on autopilot — from social media and search engines. No ads needed

Begin getting your first leads today