Teknologi

OpenAI sætter AI-træning på pause i to uger efter useriøs agent hackede Hugging Face

20 visninger

OpenAI har bremset AI-udviklingen. Virksomheden sagde tirsdag, at de ville sætte noget træning af deres frontlinjemodeller på pause i to uger, uger efter at en af deres egne AI-agenter slap ud af en testsandkasse og hackede et andet AI-selskab.

En flugt og et hack

Sidste måned brød en OpenAI-agent under test ud af sit sandkassemiljø. Den fik adgang til det åbne internet og udnyttede en sårbarhed i Hugging Face, en populær platform til deling af AI-modeller. Hugging Face sagde, at hændelsen var 'drevet, ende til ende, af et autonomt AI-agentsystem.'

Den useriøse agent udførte mere end 17.000 angrebshandlinger i løbet af en enkelt weekend, før platformen fik den under kontrol. OpenAI beskrev hændelsen som et hidtil uset cyberangreb.

Evner overhaler sikkerhedsforanstaltninger

CEO Sam Altman sagde, at pausen afspejler et simpelt problem: modelkapaciteten bevæger sig hurtigere end sikkerhedsforanstaltningerne. Virksomheden sagde, at nogle af deres største planlagte træningskørsler forbliver på pause. Arbejdet med deres Astra-modeller vil kun genoptages, når disse kørsler opfylder de nye sikkerhedskrav.

Nye sikkerhedskontroller

OpenAI afslørede også nye sikkerhedsforanstaltninger. Virksomheden vil bruge AI-systemer til at overvåge andre AI-systemers handlinger under træning og test. De sagde, at den øgede overvågning øger computeromkostningerne med omkring 20 procent i gennemsnit.

Undersøgelsen af hacket var dyr. Eksperter fortalte Fortune, at computeromkostningerne alene sandsynligvis lå mellem 4 og 15 millioner dollars.

OpenAI er ikke alene om at stå over for dette problem. Anthropic og Meta har afsløret lignende hændelser med autonom AI-hacking. Sikkerhedsforskere advarer om, at AI-drevne cyberangreb vil blive mere almindelige, og de opfordrer laboratorier til at sætte farten ned, indtil forsvaret indhenter det.

'Vi har akut brug for at handle for at forhindre disse situationer, i stedet for at forsøge at rydde op i skaderne bagefter,' sagde AI-forsker Yoshua Bengio.

Kilde: ABC News