AI पायाभूत सुविधांमुळे इंटरनेट जतन करणाऱ्यांवर ताण वाढतो आहे

वेबच्या स्मृती संस्थांपर्यंत स्टोरेजची कोंडी पोहोचली आहे

AI data center बूम केवळ chip बाजार आणि वीजेच्या मागणीमध्ये बदल घडवत नाही. तो इंटरनेटचेच जतन करणाऱ्या संस्थांवरही एक शांत प्रकारचा दबाव निर्माण करत आहे. 404 Media ने उद्धृत केलेल्या archivists आणि nonprofit operators यांच्या मते, उच्च-क्षमतेच्या hard drives आणि solid-state storage यांच्या वाढलेल्या किंमती आणि कमतरता digital archives सांभाळणे आणि विस्तार करणे अधिक कठीण करत आहेत.

हा परिणाम विशेषतः bulk storage economics वर अवलंबून असलेल्या संस्थांवर तीव्र आहे. Internet Archive, Wikimedia, शैक्षणिक संस्था, आणि hobby archivists सर्वजण प्रचंड प्रमाणातील डेटा ingest, replicate, आणि संरक्षित करण्यासाठी drives च्या स्थिर पुरवठ्यावर अवलंबून असतात. AI infrastructure वाढत असताना हे मूलभूत घटक अधिक महाग, अधिक दुर्मिळ, किंवा दोन्ही होत असल्याचे ते सांगतात.

Storage market मधील वाढ संरक्षणासाठी का महत्त्वाची आहे

Digital preservation ऐकायला अमूर्त वाटते, पण ते भौतिक hardware वर उभे आहे. प्रत्येक crawl, upload, backup, आणि mirrored collection शेवटी अशा device वरच जाते जी खरेदी करावी लागते, तैनात करावी लागते, आणि बदलावी लागते. त्या devices च्या किंमती वाढल्या की archives समोर थेट capacity constraint उभी राहते.

या अहवालात एक ठळक उदाहरण दिले आहे: गेल्या शरदऋतूमध्ये $159 ला मिळणारा 2TB external Samsung SSD प्रकाशनाच्या वेळी $575 ला होता. PC Part Picker च्या tracking data नुसार, मागील वर्षी ऑक्टोबरच्या सुमारास consumer आणि enterprise storage दोन्हीमध्ये व्यापक किंमतवाढ दिसू लागली, काही drives च्या किंमती दुप्पट झाल्या किंवा 150 टक्क्यांहून अधिक वाढल्या. काही प्रकरणांत drives उपलब्धच नव्हत्या, आणि दुर्मिळ models भोवती resale market तयार झाला आहे.

मोठे archives आधीच टंचाईशी जुळवून घेत आहेत

Internet Archive आणि Wayback Machine चे संस्थापक Brewster Kahle यांनी ही समस्या वेळ आणि पैशाच्या दृष्टीने खरी असल्याचे सांगितले. Archive दररोज 100 terabytes पेक्षा जास्त नवीन सामग्री गोळा करते आणि आधीच 210 petabytes पेक्षा जास्त archived material सांभाळत आहे, ज्यासाठी सतत upgrades आणि maintenance आवश्यक आहे. संस्थेच्या पसंतीच्या 28-30TB drives उपलब्ध नाहीत किंवा असामान्यरीत्या महाग आहेत, असे Kahle म्हणाले.

अशा demand scale वर पर्याय शोधणे कठीण होते. एखादा archive तात्पुरत्या टंचाईशी तडजोड करू शकतो, पण प्रत्येक workaround मध्ये efficiency, acquisition planning, किंवा hardware standardization बाबतीत tradeoffs असतात. संरक्षण संस्थेसाठी त्याचा अर्थ मंद वाढ, अधिक operational complexity, किंवा आणखी घट्ट budget दबाव असा होऊ शकतो.

Wikimedia देखील तेच इशारे पाहत आहे

Wikipedia आणि Wikimedia Commons ला पाठबळ देणाऱ्या Wikimedia Foundation नेही प्रकाशनाला सांगितले की storage prices वाढणे ही चिंतेची बाब आहे. केवळ Wikipedia मधील 65 million पेक्षा जास्त articles आणि व्यापक प्रकल्पांच्या मागे असलेल्या महत्त्वाच्या media infrastructure मुळे server आणि storage capacity या अत्यावश्यक operational गरजा आहेत. memory आणि hard drives च्या थेट खरेदीवरच नव्हे, तर server delivery lead times आणि भविष्यातील orders नियोजित करण्याच्या क्षमतेवरही या वाढींचा परिणाम होत असल्याचे Wikimedia म्हणाले.

हे महत्त्वाचे आहे, कारण nonprofit संस्था supply shocks hyperscale operators प्रमाणे absorb करू शकत नाहीत. मोठ्या AI कंपन्या data center expansion द्वारे storage demand वाढवू शकतात, पण त्या सामान्यतः public-interest archives पेक्षा वेगळ्या प्रकारच्या capital flexibility सह काम करतात.

AI buildout ची व्यापक किंमत

ही कथा AI boom च्या सूक्ष्म सांस्कृतिक परिणामाकडे निर्देश करते. नवीन generative systems चालवणारी तीच infrastructure race वेबचा ऐतिहासिक नोंदवही जपण्याचा खर्चही वाढवू शकते. हा ताण दुर्लक्षित करणे कठीण आहे. technology industry अधिक मोठे models आणि services तयार करण्यासाठी धावत असताना, डिजिटल संस्कृतीची source material जपणाऱ्या समूहांना स्थिर राहण्यासाठीही अधिक खर्च करावा लागत आहे.

याचा अर्थ असा नाही की AI मुळेच प्रत्येक storage market movement घडतो. पण archive sector ला स्पष्टपणे aggressive infrastructure demand मुळे आकार घेतलेल्या supply environment चे दुष्परिणाम जाणवत आहेत. preservation budgets दाबले गेले की धोका अमूर्त राहत नाही. काही data उशिरा येऊ शकतात, कमी प्राधान्य दिले जाऊ शकते, किंवा मोठ्या प्रमाणावर सुरक्षित ठेवणे कठीण होऊ शकते.

इंटरनेटला नेहमीच स्मृतीची समस्या राहिली आहे. links कुजतात, platforms नाहीशी होतात, formats खराब होतात. सध्याचा क्षण उल्लेखनीय यासाठी आहे की, आठवण जपण्याचा बाजार महाग होत असतानाच जतन करण्यासारख्या गोष्टींची मात्रा सतत वाढत आहे. archives साठी ही फक्त procurement headache नाही. ही digital history च्या दीर्घकालीन stewardship साठी एक structural challenge आहे.

हा लेख 404 Media च्या रिपोर्टिंगवर आधारित आहे. मूळ लेख वाचा.