आलिंगन करता हुआ चेहराहजारों ओपन-सोर्स मॉडल की मेजबानी करने वाला लोकप्रिय एआई मॉडल हब एक डीपफेक संकट का सामना कर रहा है। सुरक्षा विशेषज्ञों द्वारा प्रकाशित नए शोध से पता चलता है कि प्लेटफ़ॉर्म के शीर्ष छवि संपादन मॉडल मौजूदा सुरक्षा उपायों के बावजूद आसानी से स्पष्ट, गैर-सहमति वाले डीपफेक उत्पन्न कर सकते हैं। 1,000 वास्तविक उपयोगकर्ता संकेतों के परीक्षण और विश्लेषण के आधार पर निष्कर्ष, खुले एआई विकास और सामग्री मॉडरेशन के चौराहे पर एक बढ़ती समस्या को उजागर करते हैं – जो उद्योग को इस बात पर पुनर्विचार करने के लिए मजबूर कर सकता है कि जेनरेटर मॉडल कितने स्वतंत्र रूप से उपलब्ध होने चाहिए।
आलिंगन करता हुआ चेहरा एआई मॉडल के लिए गिटहब के रूप में अपनी प्रतिष्ठा बनाई, एक ऐसी जगह जहां डेवलपर्स भाषा मॉडल से लेकर छवि जनरेटर तक सब कुछ खुले तौर पर साझा करते हैं। लेकिन वह खुलापन अब जांच के दायरे में है। प्लेटफ़ॉर्म के सबसे लोकप्रिय छवि संपादन मॉडल का परीक्षण करने वाले सुरक्षा शोधकर्ताओं ने पाया कि वे न्यूनतम प्रयास के साथ सुरक्षा फ़िल्टर को बायपास कर सकते हैं, जिससे स्पष्ट डीपफेक उत्पन्न होते हैं जो कई न्यायालयों में प्लेटफ़ॉर्म नीतियों और कानूनों दोनों का उल्लंघन करते हैं।
शोध ने केवल यह परीक्षण नहीं किया कि सिद्धांत में क्या संभव है। इन मॉडलों को सौंपे गए 1,000 वास्तविक संकेतों का विश्लेषण करके, जांचकर्ताओं ने दस्तावेजीकरण किया कि वास्तविक उपयोगकर्ता प्रौद्योगिकी का कैसे शोषण कर रहे हैं। निष्कर्ष एक परेशान करने वाली तस्वीर पेश करते हैं कि कैसे वैध छवि संपादन के लिए डिज़ाइन किए गए सुलभ उपकरणों को गैर-सहमति वाली अंतरंग इमेजरी बनाने के लिए हथियार बनाया जा रहा है।
आलिंगन करता हुआ चेहरा 500,000 से अधिक मॉडलों को होस्ट करता है, खुद को एआई क्रांति के लिए बुनियादी ढांचे के रूप में स्थापित करता है। जैसे बंद प्लेटफार्मों के विपरीत ओपनएआई या गूगलजो मॉडल पहुंच को कसकर नियंत्रित करता है, हगिंग फेस खुले वितरण को अपनाता है। कोई भी मॉडल डाउनलोड कर सकता है, उन्हें स्थानीय रूप से चला सकता है, और निरीक्षण के बिना उन्हें संशोधित कर सकता है। खुलेपन के प्रति उस दार्शनिक प्रतिबद्धता ने इसे शोधकर्ताओं और डेवलपर्स के लिए अमूल्य बना दिया है, लेकिन इसने अंधे धब्बे भी पैदा कर दिए हैं।
परीक्षण किए गए मॉडल, जो प्लेटफ़ॉर्म के सबसे अधिक डाउनलोड किए गए छवि संपादन टूल में शुमार हैं, सैद्धांतिक रूप से स्पष्ट सामग्री उत्पन्न करने के खिलाफ सुरक्षा उपाय शामिल हैं। लेकिन शोधकर्ताओं ने पाया कि त्वरित इंजीनियरिंग तकनीकों के माध्यम से इन सुरक्षाओं को आसानी से दरकिनार कर दिया गया था जो कुछ ऑनलाइन समुदायों में सामान्य ज्ञान बन गए हैं। तथ्य यह है कि औसत उपयोगकर्ता इन वर्कअराउंड को सफलतापूर्वक नियोजित कर रहे हैं, यह बताता है कि समस्या परिष्कृत बुरे अभिनेताओं से कहीं आगे तक फैली हुई है।
जो बात इसे विशेष रूप से चिंताजनक बनाती है वह है सामग्री की गैर-सहमति वाली प्रकृति। सामान्य स्पष्ट सामग्री के विपरीत, डीपफेक न्यूड अक्सर बिना अनुमति के उनकी समानताओं का उपयोग करके विशिष्ट व्यक्तियों को लक्षित करते हैं। ब्रिटेन सहित कई अमेरिकी राज्यों और देशों ने इसे छवि-आधारित यौन शोषण के एक रूप के रूप में मान्यता देते हुए, गैर-सहमति वाली डीपफेक पोर्नोग्राफ़ी को अपराध घोषित कर दिया है। शोध से पता चलता है कि मुख्यधारा के एआई प्लेटफार्मों पर होस्ट किए गए टूल के माध्यम से इन कानूनों का बड़े पैमाने पर उल्लंघन किया जा रहा है।
मेटा और अन्य तकनीकी दिग्गजों को रिवेंज पोर्न और गैर-सहमति वाली इमेजरी पर वर्षों के दबाव का सामना करना पड़ा है। उन्होंने समस्या से निपटने के लिए परिष्कृत पहचान प्रणाली और मॉडरेशन टीमें बनाई हैं। लेकिन खुले एआई मॉडल की विकेंद्रीकृत प्रकृति एक अलग चुनौती पैदा करती है। जब कोई किसी मॉडल को डाउनलोड करता है आलिंगन करता हुआ चेहरा और इसे अपने हार्डवेयर पर चलाते हैं, इसमें कोई सामग्री मॉडरेशन परत नहीं है, कोई अपील प्रक्रिया नहीं है, कोई निरीक्षण नहीं है।
प्लेटफ़ॉर्म में हानिकारक सामग्री को प्रतिबंधित करने वाली नीतियां हैं और सेवा की शर्तों का उल्लंघन करने वाले मॉडल को हटाया जा सकता है। लेकिन प्रवर्तन उपयोगकर्ता रिपोर्ट और मैन्युअल समीक्षा पर बहुत अधिक निर्भर करता है। सैकड़ों-हजारों मॉडलों और निरंतर अपलोड के साथ, वह प्रतिक्रियाशील दृष्टिकोण गति बनाए रखने के लिए संघर्ष करता है। किसी भी हस्तक्षेप को ट्रिगर किए बिना लोकप्रिय मॉडलों तक आसानी से पहुंचने और परीक्षण करने की शोधकर्ताओं की क्षमता प्रवर्तन अंतराल के पैमाने को दर्शाती है।
यह सिर्फ हगिंग फेस की समस्या नहीं है – यह एआई समुदाय में खुलेपन और सुरक्षा के बीच व्यापक तनाव को दर्शाता है। ओपन-सोर्स अधिवक्ताओं का तर्क है कि मॉडल एक्सेस को प्रतिबंधित करने से वैध अनुसंधान को सीमित करते हुए भूमिगत रूप से हानिकारक उपयोग को बढ़ावा मिलता है। आलोचकों का कहना है कि कुछ प्रौद्योगिकियां इतनी खतरनाक हैं कि बिना रेलिंग के वितरित करना बेहद खतरनाक है। डीपफेक निष्कर्ष दोनों पक्षों के लिए गोला-बारूद हैं।
यह समय विशेष रूप से संवेदनशील है क्योंकि दुनिया भर के कानून निर्माता एआई नियमों का मसौदा तैयार कर रहे हैं। यूरोपीय संघ के एआई अधिनियम में उच्च जोखिम वाले एआई सिस्टम से संबंधित प्रावधान शामिल हैं। अमेरिकी विधायक प्लेटफ़ॉर्म दायित्व और एआई सुरक्षा के सवालों को घेर रहे हैं। आसानी से सुलभ डीपफेक टूल के दस्तावेजीकरण पर शोध करने से मॉडल वितरण पर सख्त नियंत्रण की मांग तेज हो सकती है, जिससे ओपन-सोर्स एआई इकोसिस्टम को नुकसान हो सकता है, जिसे कंपनियां पसंद करती हैं। आलिंगन करता हुआ चेहरा का निर्माण किया है।
कुछ एआई कंपनियां पहले से ही पूर्ण खुलेपन से पीछे हट रही हैं। ओपनएआई दुरुपयोग की चिंताओं के कारण 2019 में GPT-2 के पूर्ण संस्करण को जारी नहीं करने का प्रसिद्ध निर्णय लिया गया, हालांकि बाद में यह पलट गया। मेटा वज़न को सार्वजनिक रूप से उपलब्ध कराने के बावजूद उपयोग प्रतिबंधों के साथ अपने लामा मॉडल जारी किए हैं। सवाल यह है कि क्या छवि निर्माण मॉडल को वितरण को सीमित करने के लिए समान दबाव का सामना करना पड़ेगा।
गैर-सहमति वाले डीपफेक के पीड़ितों के लिए, खुले बनाम बंद एआई मॉडल के आसपास तकनीकी बहस मुद्दे से परे है। नुकसान वास्तविक और तत्काल है, चाहे उपकरण एपीआई कुंजियों के पीछे बंद हों या स्वतंत्र रूप से डाउनलोड करने योग्य हों। वकालत समूहों ने मनोवैज्ञानिक आघात, प्रतिष्ठा क्षति और यहां तक कि शारीरिक खतरे का दस्तावेजीकरण किया है जो डीपफेक पीड़ितों को अनुभव होता है। शोध से पता चलता है कि ये उपकरण कितनी आसानी से सुरक्षा उपायों को दरकिनार कर देते हैं, केवल उन चिंताओं को बढ़ाता है।
आलिंगन करता हुआ चेहरा विशिष्ट शोध निष्कर्षों पर सार्वजनिक रूप से प्रतिक्रिया नहीं दी है, लेकिन कंपनी ने पहले जिम्मेदार एआई विकास और पहचाने जाने पर हानिकारक सामग्री को हटाने के लिए अपनी प्रतिबद्धता बताई है। चुनौती ऐसी प्रणालियों का निर्माण करना है जो आधुनिक एआई विकास के पैमाने और गति पर उन प्रतिबद्धताओं को लागू कर सकें, बिना उस खुले लोकाचार को छोड़े जिसने प्लेटफ़ॉर्म को पहले स्थान पर मूल्यवान बनाया।
हगिंग फेस डीपफेक अनुसंधान एआई के परिभाषित तनावों में से एक को स्पष्ट करता है: दुरुपयोग से सुरक्षा के साथ खुलेपन के माध्यम से नवाचार को कैसे संतुलित किया जाए। जैसे-जैसे छवि निर्माण मॉडल अधिक शक्तिशाली और सुलभ होते जाते हैं, तकनीकी रूप से जो संभव है और जो नैतिक रूप से स्वीकार्य है, उसके बीच का अंतर बढ़ता जाता है। प्लेटफ़ॉर्म नीतियां और स्वैच्छिक सुरक्षा उपाय स्पष्ट रूप से पर्याप्त नहीं हैं जब निर्धारित उपयोगकर्ता उन्हें आसानी से बायपास कर सकते हैं। चाहे समाधान बेहतर तकनीकी नियंत्रण, सख्त प्लेटफ़ॉर्म प्रवर्तन, या नए नियमों के माध्यम से आता है, यथास्थिति अस्थिर होती जा रही है। हगिंग फेस और व्यापक खुले एआई समुदाय के लिए, सवाल यह नहीं है कि क्या बदलाव आ रहा है – सवाल यह है कि क्या वे उस बदलाव को सक्रिय रूप से आकार देंगे या इस तरह के शोध का जवाब देने वाले नियामकों द्वारा इसे उन पर थोप दिया जाएगा।









