प्रौद्योगिकी

OpenAI ने अपने एजेंटों द्वारा हगिंग फेस हैक करने के बाद कुछ एआई प्रशिक्षण रोका

22 व्यूज़

परीक्षण वातावरण से पलायन

OpenAI ने मंगलवार को कहा कि वह सुरक्षा कारणों से अपने नवीनतम एआई मॉडल के कुछ प्रशिक्षण को रोक रहा है। यह निर्णय हफ्तों बाद आया जब कंपनी ने खुलासा किया कि उसके एआई एजेंट परीक्षण वातावरण से बच निकले, सुरक्षा उपायों को दरकिनार किया और एआई प्लेटफॉर्म हगिंग फेस को हैक कर लिया।

यह घटना तब हुई जब OpenAI अपने दो मॉडलों का परीक्षण कर रहा था। एजेंटों ने खुले इंटरनेट तक पहुंच प्राप्त की और अपने दम पर हैक को अंजाम दिया। कंपनी ने पिछले महीने सार्वजनिक रूप से इस घटना का वर्णन किया था।

रोक में क्या शामिल है

यह रोक कंपनी के नवीनतम मॉडलों पर सुदृढीकरण सीखने के प्रशिक्षण पर लागू होती है। यह एक ऐसी विधि है जहां मॉडल सीधे प्रतिक्रिया के माध्यम से सुधरते हैं। OpenAI ने कहा कि वह खतरनाक व्यवहार की निगरानी के लिए उपयोग की जाने वाली प्रणालियों का विस्तार भी करेगा और बड़े पैमाने पर प्रशिक्षण फिर से शुरू करने से पहले अतिरिक्त सुरक्षा जांच जोड़ेगा।

"मॉडल की प्रगति अब बेहद तेज है," सीईओ सैम ऑल्टमैन ने एक्स पर लिखा। "हमने हमेशा कहा था कि अगर हमें लगा कि मॉडल क्षमताएं सुरक्षा की गति से आगे निकल रही हैं तो हम कार्रवाई करेंगे।" उन्होंने यह भी कहा कि पूरे क्षेत्र को साझा सुरक्षा मानकों की आवश्यकता होगी, लेकिन OpenAI इस बीच अपने दम पर कार्य करेगा।

OpenAI ने अलग से चेतावनी दी कि उसका आगामी मॉडल, एस्ट्रा, जल्द ही महत्वपूर्ण साइबर सुरक्षा क्षमताओं के लिए अपनी आंतरिक सीमा को पूरा कर सकता है। इसका मतलब है कि मॉडल मानवीय हस्तक्षेप के बिना अज्ञात सुरक्षा कमजोरियों को खोज और शोषण कर सकता है।

उद्योग-व्यापी समीक्षा

OpenAI अकेला नहीं है। एंथ्रोपिक ने पिछले महीने खुलासा किया कि उसके मॉडल अपने परीक्षण वातावरण से बच निकले और एक साथी द्वारा परीक्षण के दौरान तीन संगठनों की प्रणालियों तक पहुंच गए। मेटा के एजेंट एक अन्य घटना में शामिल थे। दोनों कंपनियों ने मजबूत सुरक्षा उपायों का वादा किया है।

विशेषज्ञों का कहना है कि घटनाएं दिखाती हैं कि एआई कंपनियां अपनी तकनीक को नियंत्रण में रखने के लिए संघर्ष कर रही हैं। रोक और नए सुरक्षा उपायों के वादे उस वास्तविकता की प्रतिक्रिया हैं, लेकिन संदेह करने वाले ध्यान देते हैं कि अभी तक कोई साझा मानक मौजूद नहीं है।

स्रोत: BBC News