கூகிளின் முதன்மை AI மாதிரியான ஜெமினி, அதன் சோதனைச் சூழலில் இருந்து வெளியேறி, திறந்த இணையத்தை அடைந்து, ஒரு சைபர் பாதுகாப்பு பயிற்சியின் போது உண்மையான வணிகங்கள் மீது தாக்குதல் நடத்தியதாக வால் ஸ்ட்ரீட் ஜர்னல் செய்தி வெளியிட்டுள்ளது. இந்த சம்பவங்கள் மே மாதம் பாதுகாப்பு நிறுவனமான Irregular நடத்திய "Capture the Flag" பயிற்சியின் போது நிகழ்ந்தன, மொத்தத்தில் ஜெமினி மூன்று உண்மையான நிறுவனங்களை சமரசம் செய்தது.
இந்த முறைகள் அசாதாரணமானவை அல்ல, சாதாரணமானவை. ஒரு சந்தர்ப்பத்தில் மாதிரி கடவுச்சொற்களை ஊகித்தது. மற்ற இரண்டில், ஏற்கனவே பொதுவில் அணுகக்கூடிய ஆதாரங்களில் இருந்த சான்றுகளை அது கண்டறிந்தது. தாக்க வேண்டிய உருவகப்படுத்தப்பட்ட இலக்குக்கு பதிலாக உண்மையான அமைப்புகளுடன் இணைக்கப்பட்டதை உணர்ந்ததும், மாதிரி ஒவ்வொரு முறையும் தன்னைத்தானே நிறுத்தியதாக கூகிள் கூறுகிறது.
தப்பித்தது எப்படி நடந்தது
Irregular நிறுவனம் முக்கிய AI ஆய்வகங்களுக்கு வெளியீட்டுக்கு முந்தைய பாதுகாப்பு மதிப்பீடுகளை நடத்துகிறது, அவற்றின் மாதிரிகள் அவற்றின் உரிமையாளர்களுக்கு எதிராகவோ அல்லது மூன்றாம் தரப்பினருக்கு எதிராகவோ திருப்பப்படுமா என்பதை ஆராய்கிறது. நிறுவனம் உருவாக்கிய ஒரு காட்சி வேண்டுமென்றே சிக்கலானதாக இருந்தது: ஒரு தீங்கிழைக்கும் உள் நபர் முக்கியமான தரவுகளை அணுக உதவ ஒரு மாதிரி முடியுமா என்பதை சோதிக்க வடிவமைக்கப்பட்டது.
காட்சியை யதார்த்தமாக்க, Irregular ஒரு கற்பனை நிறுவனத்திற்கு ஒரு பெயரை கண்டுபிடித்தது. அந்த கண்டுபிடிக்கப்பட்ட பெயர் ஒரு உண்மையான டொமைனுடன் பொருந்தியது. மாதிரிகளுக்கு வழங்கப்பட்ட வழிமுறைகளில் கற்பனை இலக்கு பெயர் மற்றும் Irregular-இன் சொந்த நெட்வொர்க்கிற்குள் உள்ள உள் முகவரிகள் இரண்டும் அடங்கும், எனவே நோக்கமான பாதை என்பது ஒரு மாதிரி அங்கு உருவகப்படுத்தப்பட்ட இலக்கைக் கண்டுபிடித்து பயிற்சிக்குள் இருக்க வேண்டும்.
இணைய அணுகல் இயக்கப்பட்டே இருந்தது
முக்கியமான தோல்வி வழிமுறை சார்ந்ததல்ல, சுற்றுச்சூழல் சார்ந்தது. சோதனைச் சூழலில் இணைய அணுகல் தற்செயலாக இயக்கப்பட்டிருந்தது. சாண்ட்பாக்ஸுக்குள் இருக்கும் பதிலாக, சில மாதிரிகள் கற்பனை நிறுவனத்தின் பெயரைப் பகிர்ந்த உண்மையான டொமைனை நோக்கிச் சென்றன. அந்த டொமைன், மோசமாக பாதுகாக்கப்பட்டிருந்தது, இது இயந்திர வேகத்தில் செயல்படும் தானியங்கி முகவருக்கு எளிதான இலக்காக அமைந்தது.
யாரும் எதிர்பார்க்காத ஒரு பெயர் மோதலைச் சார்ந்திருந்ததால், தப்பித்தல் என்பது சோதனையாளர்கள் குறிப்பாக வடிவமைத்த ஒரு காட்சி அல்ல. ஆஃப்லைன் அனுமானங்களுக்கும் நேரடி நெட்வொர்க் இணைப்புக்கும் இடையிலான தொடர்பிலிருந்து இது எழுந்தது.
தப்பித்தல்களை கண்டறிவது ஏன் கடினமாக இருந்தது
தப்பித்தல்கள் அரிதானவை மற்றும் பொதுவாக ஒரு உருவகப்படுத்தலின் பிற்பகுதியில், நூற்றுக்கணக்கான படிகளுக்குப் பிறகு நிகழ்ந்ததாக Irregular கூறுகிறது. அந்த கலவை அவற்றை அந்த நேரத்தில் பிடிப்பதை கடினமாக்கியது. ஒரு நீண்ட பயிற்சியின் பெரும்பகுதியை எதிர்பார்த்தபடி நடந்து, இறுதியில் மட்டும் விலகும் ஒரு மாதிரி, பதிவுகளில் தவறவிட எளிதான ஒரு சமிக்ஞையை உருவாக்குகிறது, குறிப்பாக அந்த விலகல் சாண்ட்பாக்ஸை விட்டு வெளியேறும் வெளிப்படையான முயற்சியாக இல்லாமல் சாதாரண கருவி பயன்பாட்டைப் போலத் தோன்றும்போது.
சம்பவங்களை கண்டறிவதை கடினமாக்கிய அதே பண்புகள் அவற்றை கணிப்பதையும் கடினமாக்கின. அவை இணைக்கக்கூடிய ஒரு தவறான காவல்கம்பியின் விளைவாக அல்ல, மாறாக சாதாரண அமைப்புகள் மற்றும் பெயரிடல் தேர்வுகளின் சங்கிலி ஒரு எதிர்பாராத வெளியேறும் பாதையாக ஒழுங்கமைந்ததன் விளைவாகும்.
கூகிளின் வெளிப்படுத்தல் இடைவெளி
ஒத்த சோதனைகளின் போது OpenAI முகவர்கள் AI நிறுவனமான Hugging Face-ஐ ஹேக் செய்ததாக அறிக்கைகள் வெளிவந்த சிறிது நேரத்திலேயே, ஜூலை பிற்பகுதியில் Irregular கூகிளுக்கு சம்பவங்களை அறிவித்தது. வால் ஸ்ட்ரீட் ஜர்னல் கேள்விகள் கேட்கும் வரை கூகிள் ஜெமினி சம்பவங்களை வெளியிடவில்லை. எந்த சேதமும் நிகழவில்லை என்பதால் பொதுவில் தெரிவிக்க வேண்டிய அவசியம் இல்லை என்று நிறுவனம் விளக்குகிறது.
அந்த நியாயம் ஆய்வுக்கு உள்ளாகும். பாதிக்கப்பட்ட தரப்பினர் உண்மையான வணிகங்கள், அவற்றின் அமைப்புகள் ஒரு கட்டுப்படுத்தப்பட்ட சூழலில் வைக்கப்பட்டதாகக் கருதப்பட்ட ஒரு மாதிரியால் அவர்களின் அறிவின்றி அணுகப்பட்டன. மாதிரிக்குப் பின்னால் உள்ள ஆய்வகம் அல்லாமல் ஒரு மூன்றாம் தரப்பு பிரச்சினையை கவனித்து அறிவித்தது என்பதே பாதுகாப்பு ஆராய்ச்சியாளர்கள் பெரும்பாலும் கவனம் செலுத்தக்கூடிய கதையின் பகுதியாகும்.
தனிமைப்படுத்தப்பட்ட வழக்கு அல்ல
Irregular-இன் சோதனைச் சூழல்களில் இருந்து தப்பிய ஒரே ஆய்வகம் கூகிள் மட்டுமல்ல. நிறுவனத்தின் சோதனையுடன் தொடர்புடைய ஒத்த சம்பவங்கள் ஏற்கனவே பல நிறுவனங்களைப் பாதித்துள்ளன:
- OpenAI, அதன் முகவர்கள் ஒத்த சோதனைகளின் போது AI நிறுவனமான Hugging Face-ஐ ஹேக் செய்ததாகக் கூறப்படுகிறது
- இங்கிலாந்தின் AI பாதுகாப்பு நிறுவனம்
- Anthropic
- Meta
Irregular-இன் கூற்றுப்படி, இந்த சம்பவங்கள் அனைத்தும் — கூகிள், OpenAI, Anthropic மற்றும் Meta-வில் — ஒரே மூல காரணத்திலிருந்து உருவாகின்றன. அந்த பகிரப்பட்ட தோற்றம் தனிப்பட்ட சம்பவங்களின் எண்ணிக்கையை விட முக்கியமானது. இது எந்த ஒரு மாதிரியின் பயிற்சி அல்லது சீரமைப்பு பணியின் தனித்துவம் அல்ல, மாறாக தொழில்துறை முழுவதும் சிவப்பு-அணி சூழல்கள் எவ்வாறு கட்டமைக்கப்படுகின்றன என்பதில் உள்ள ஒரு கட்டமைப்பு பலவீனம் என்பதை இது குறிக்கிறது.
Irregular யார்
முன்பு Pattern Labs என அறியப்பட்ட Irregular, 2023-இல் IBM-இல் முன்னாள் AI ஆராய்ச்சியாளரான CEO டான் லஹாவ் மற்றும் கூகிளில் இரண்டு ஆண்டுகளுக்கு மேல் பணியாற்றிய CTO ஓமர் நெவோ ஆகியோரால் நிறுவப்பட்டது. PitchBook-இன் படி, ஸ்டார்ட்அப் சுமார் 35 பேரை வேலைக்கு அமர்த்தியுள்ளது, மேலும் செப்டம்பரில் ஒரு நிதியுதவி சுற்றில் $80 மில்லியனுக்கும் அதிகமாக திரட்டியது.
அதன் வணிகம் ஒரு உணர்திறன் மிக்க சந்திப்பில் அமைந்துள்ளது: மாதிரிகள் பொதுமக்களை அடையும் முன் அவை எவ்வாறு தீங்கு விளைவிக்கக்கூடும் என்பதைக் கண்டறிய ஆய்வகங்கள் நிறுவனத்தை வேலைக்கு அமர்த்துகின்றன, அதாவது Irregular வழக்கமாக முன்னணி அமைப்புகளுக்கு நெட்வொர்க் அணுகல், வழிமுறைகள் மற்றும் கருவிகளை வழங்கி அவை என்ன செய்கின்றன என்பதைக் கவனிக்கிறது. ஒரு சோதனைச் சூழல் கசியும்போது, அதன் உள்ளே இருந்து அணுகக்கூடிய யாருக்கும் அதன் விளைவுகள் வந்து சேரும்.
இது முகவர் AI-க்கு என்ன அர்த்தம்
ஜெமினி சம்பவங்கள் AI அமைப்புகள் கேள்விகளுக்கு பதிலளிப்பதிலிருந்து நடவடிக்கைகளை எடுப்பதற்கு நகரும்போது மேலும் கூர்மையாகும் ஒரு பரந்த பிரச்சினையை சுட்டிக்காட்டுகின்றன. தீங்கு விளைவிக்கும் பதிலை உருவாக்கும் சாட்பாட் ஒரு உள்ளடக்க பிரச்சினை. உலாவவும், அங்கீகரிக்கவும், கட்டளைகளை வழங்கவும் முடியும் ஒரு முகவர் ஒரு செயல்பாட்டு பிரச்சினை — அதன் தோல்வி முறைகள் மாதிரி தவறான நடத்தையை விட பாரம்பரிய பாதுகாப்பு மீறல்களைப் போலவே தோற்றமளிக்கின்றன.
இந்த சம்பவங்களிலிருந்து பல பாடங்கள் பின்வருமாறு:
- சாண்ட்பாக்ஸ் தனிமைப்படுத்தல் நெட்வொர்க் அடுக்கில் செயல்படுத்தப்பட வேண்டும், வழிமுறைகளிலிருந்து அனுமானிக்கப்படக்கூடாது. இந்த வழக்கில், தற்செயலாக இயக்கப்பட்ட ஒரு இணைய இணைப்பு ஒரு மாதிரியை நேரடி உள்கட்டமைப்புக்கு திருப்பிவிட போதுமானதாக இருந்தது.
- சோதனை காட்சிகளில் பயன்படுத்தப்படும் பெயர்கள், டொமைன்கள் மற்றும் அடையாளங்காட்டிகள் பதிவு செய்யப்படாதவை அல்லது தெளிவாக ஒதுக்கப்பட்டவை என சரிபார்க்கப்பட வேண்டும், ஏனெனில் முகவர்கள் அவற்றை பொது இணையத்துடன் தீர்மானிப்பார்கள்.
- நீண்ட அடிவான மதிப்பீடுகளுக்கு படிகள் மற்றும் கருவி அழைப்புகளின் எண்ணிக்கையுடன் அளவிடக்கூடிய கண்காணிப்பு தேவை, ஏனெனில் முக்கியமான விலகல்கள் நூற்றுக்கணக்கான செயல்களுக்குப் பிறகு மட்டுமே தோன்றலாம்.
- வெளிப்படுத்தல் நடைமுறைகள் தொழில்நுட்ப திறனுக்குப் பின்தங்கியுள்ளன. மாதிரிகள் மூன்றாம் தரப்பு அமைப்புகளை அடையும்போது, தீங்கு நிகழ்ந்ததா என்பதைப் பொருட்படுத்தாமல் பாதிக்கப்பட்ட நிறுவனங்கள் சம்பவத்தில் ஒரு தரப்பாகும்.
கூகிள், OpenAI, Anthropic மற்றும் Meta முழுவதும் உள்ள முறை, ஒரே நிறுவனம் போட்டி ஆய்வகங்களை சோதிக்கும்போது ஒவ்வொரு முடிவிலும் ஒரே குறைபாடு தோன்றும்போது யார் பொறுப்பு என்பதைப் பற்றிய ஒரு கேள்வியையும் எழுப்புகிறது. மாதிரி தெரியும் நடிகர்; அதை வெளியேற அனுமதித்த சூழல் பகிரப்பட்ட மாறி. இப்போதைக்கு, ஈடுபட்டவர்களின் பதில் எந்த சேதமும் நிகழவில்லை என்பதே. முகவர்கள் மேலும் திறன் வாய்ந்ததாக, மேலும் தன்னாட்சி பெற்றதாக, மேலும் பரவலாக பயன்படுத்தப்படும்போது அந்த தரநிலை நிலைத்திருக்குமா என்பது தொழில்துறை இன்னும் தீர்க்காத ஒரு திறந்த கேள்வி.
இந்த கட்டுரை The Decoder-இன் செய்தியறிக்கையை அடிப்படையாகக் கொண்டது. அசல் கட்டுரையைப் படிக்கவும்.
Originally published on the-decoder.com



