OpenAI आणि Broadcom यांनी कस्टम inference chip उघड केला

OpenAI ने models आणि software यांच्या पलीकडे जाऊन, मोठ्या भाषा मॉडेल inference साठी खास डिझाइन केलेला कस्टम chip जाहीर करून एक लक्षणीय पाऊल उचलले आहे. Jalapeño नावाचा हा accelerator Broadcom सोबत विकसित करण्यात आला असून OpenAI त्याला आपला पहिला “Intelligence Processor” असे संबोधत आहे. हा AI systems मोठ्या प्रमाणावर अधिक स्वस्त आणि अधिक reliable पद्धतीने चालावेत यासाठी तयार केलेला purpose-built component आहे.

दिलेल्या source material नुसार, Jalapeño हा आधीपासूनच्या general-purpose processor चा बदल म्हणून मांडलेला नाही. OpenAI म्हणते की तो आधुनिक LLM inference साठी सुरुवातीपासून तयार करण्यात आला. Broadcom ने silicon manufacturing आणि networking technology, त्यात त्याचे Tomahawk networking chips देखील, पुरवले, तर Celestica boards, racks, आणि system integration हाताळत आहे.

कामाचे हे विभाजन महत्त्वाचे आहे, कारण त्यामुळे OpenAI AI stack च्या एका वेगळ्या थरात जात असल्याचे दिसते. अनेक वर्षांपासून कंपनी प्रामुख्याने model development आणि consumer तसेच enterprise products साठी ओळखली जात होती. एक कस्टम accelerator ही strategy infrastructure पर्यंत वाढवतो, जिथे cost, power use, आणि supply यावरचे नियंत्रण AI deployment ची economics model quality इतकीच ठरवू शकते.

Inference hardware आत्ता का महत्त्वाचे आहे

वेळेची निवड तर्कसंगत आहे. प्रचंड models चे training लक्ष वेधते, पण inference त्यांना products मध्ये रूपांतरित करते. प्रत्येक user query, API request, coding completion, किंवा chatbot response वारंवार आणि कार्यक्षमतेने serve करावा लागतो. हे traffic वाढत गेले की, उत्तर तयार करण्यासाठी वापरले जाणारे hardware एक प्रमुख operational constraint बनते.

Source text मध्ये दिसून येणारा OpenAI चा युक्तिवाद असा आहे की कस्टम hardware performance per watt सुधारू शकते आणि models चालवण्याचा खर्च कमी करू शकते. reliability उच्च राखून AI usage वाढवू पाहणाऱ्या कोणत्याही कंपनीसाठी ही उद्दिष्टे केंद्रस्थानी आहेत. Inference infrastructure ला scale, latency, आणि energy use एकाच वेळी हाताळावे लागते, आणि off-the-shelf accelerators नेहमीच एखाद्या कंपनीला सर्वाधिक महत्त्वाच्या असलेल्या exact workload साठी optimize केलेले नसतात.

Jalapeño नेमक्या याच समस्येकडे लक्ष्य करत आहे. व्यापक compute platform म्हणून न राहता, तो मोठ्या भाषा मॉडेल्सच्या inference phase साठी एक specialized accelerator म्हणून ठेवण्यात आला आहे. अर्थ सरळ आहे: hardware workload नुसार tuned असेल तर system कमी data हलवू शकते, silicon अधिक कार्यक्षमतेने वापरू शकते, आणि power च्या प्रत्येक unit मागे अधिक उपयुक्त काम देऊ शकते.

Performance claims सोबत caveats आहेत

OpenAI म्हणते की सुरुवातीच्या चाचण्यांमध्ये performance per watt सध्याच्या state-of-the-art hardware पेक्षा “substantially better” होती. मात्र त्याच source text मध्ये हेही स्पष्ट आहे की हे आकडे self-reported आहेत आणि independently verified नाहीत. एक technical report नंतर अपेक्षित आहे, आणि बाहेरील निरीक्षकांसाठी काही महत्त्वाचे तपशील अजूनही अनुपस्थित आहेत.

त्या उणिवा महत्त्वाच्या आहेत. Source नुसार Jalapeño ची चाचणी कोणत्या chips विरुद्ध केली, comparison साठी कोणते tasks वापरले, आणि measurements कोणत्या conditions मध्ये घेतले, हे अजून स्पष्ट नाही. ही माहिती नसताना superiority चे दावे अंतिम न मानता प्राथमिक मानले पाहिजेत.

तरीही, OpenAI ने या प्रयत्नामागील design logic स्पष्ट केली आहे. रिपोर्ट केलेली architecture data movement कमी करते आणि utilization ला त्याच्या theoretical maximum जवळ नेते. ही दोन्ही कल्पना high-performance AI systems मध्ये मानक लक्ष्ये आहेत. System मधून data हलवणे मोठ्या प्रमाणावरील inference मध्ये मोठा bottleneck ठरू शकतो, आणि कमी utilization म्हणजे महागडे hardware कमी वापरले जात आहे. Jalapeño ने यापैकी काहीही अर्थपूर्णरीत्या सुधारले, तर benchmark leadership सिद्ध होण्यापूर्वीही ते धोरणात्मकदृष्ट्या महत्त्वाचे ठरेल.

AI च्या मदतीने जलद development cycle

घोषणेतला सर्वात लक्षवेधी तपशील म्हणजे reported development timeline. OpenAI म्हणते की design ते tape-out या प्रक्रियेला नऊ महिने लागले, आणि high-performance semiconductors साठी त्यांना माहिती असलेला हा सर्वात जलद ASIC development cycle आहे.

हे खरे असल्यास, ते स्वतःमध्येच एक महत्त्वाचे विधान आहे. Semiconductor development सहसा मंद, capital intensive, आणि वेगाने करणे कठीण असते. Source text आणखी एक लक्षवेधी तपशील जोडते: OpenAI च्या स्वतःच्या models ने design process मधील काही भाग जलद करण्यास मदत केली. त्यामुळे project दुप्पट रोचक ठरतो, कारण कंपनी केवळ AI workloads साठी hardware तयार करत नाही, तर AI नेच hardware design pipeline मध्ये योगदान दिल्याचे सांगते.

येथे एक व्यापक strategic theme दिसतो. AI tools जितके engineering work मध्ये मदत करतात, तितके कंपन्या chip design, systems integration, आणि optimization मधील timelines कमी करण्याचा प्रयत्न करू शकतात. OpenAI ची घोषणा अजून सखोल technical evidence देत नाही, पण ती एका feedback loop कडे निर्देश करते जिथे AI systems increasingly त्या infrastructure च्या निर्मितीसाठी वापरले जात आहेत जे पुढे त्याच systems ला चालवतील.

Lab samples पासून deployment पर्यंत

Source नुसार chip फक्त कागदी संकल्पना नाही. Engineering samples आधीच lab मध्ये machine learning workloads चालवत आहेत, त्यात GPT-5.3-Codex-Spark model देखील आहे. हा तपशील project announcement-stage branding च्या पुढे जाऊन किमान मर्यादित operational testing पर्यंत पोहोचल्याचे सूचित करतो.

रिपोर्टमध्ये मोठ्या प्रमाणावरील deployment late 2026 साठी नियोजित असल्याचेही सांगितले आहे. Microsoft 40% chips खरेदी करेल अशी अपेक्षा आहे, आणि तसे झाले तर OpenAI च्या infrastructure footprint मध्ये मोठ्या cloud partners ची भूमिका सुरूच राहील हे अधोरेखित होईल. हा आकडा OpenAI deployment capacity कडे कसे पाहत असेल याचाही इशारा देतो: केवळ internal capability म्हणून नव्हे, तर cloud-scale operators आणि tightly linked partners असलेल्या व्यापक ecosystem चा भाग म्हणून.

त्या roadmap असूनही, महत्त्वाचे प्रश्न अजून खुले आहेत. Source manufacturing volumes, production node details, किंवा deployment geography यांचा उल्लेख करत नाही. Networking, software maturity, आणि system-level throughput धरून Jalapeño एकूण ownership cost च्या बाबतीत विद्यमान AI hardware शी कसा तुलना करेल हेही स्पष्ट होत नाही. या अनुत्तरित प्रश्नांवरूनच हे chip एक niche strategic hedge आहे की मोठ्या platform shift ची सुरुवात, हे ठरेल.

Infrastructure control वर multi-generation दांव

OpenAI म्हणते की Jalapeño हा Broadcom सोबत बांधल्या जाणाऱ्या multi-generation platform मधील पहिला chip आहे. हे framing कोणत्याही एका benchmark पेक्षा अधिक महत्त्वाचे असू शकते. एकच custom chip हा प्रयोग असू शकतो. Multi-generation platform हे hardware व्यवसायात पुरेसे दीर्घकाळ राहून architecture काळानुसार घडवण्याचा हेतू दर्शवतो.

AI companies साठी असा control एकाच वेळी अनेक pressure points वर परिणाम करू शकतो: cost predictability, hardware availability, energy efficiency, आणि विशिष्ट model behaviors भोवती systems tailor करण्याची क्षमता. यामुळे बाह्य accelerators च्या एका वर्गावरची अवलंबनताही कमी होऊ शकते. compute access उत्पादन रणनीतीला मर्यादित करू शकतो अशा बाजारात, infrastructure control वाढत्या प्रमाणात competitive strategy चा भाग बनत आहे.

OpenAI ची ही हालचाल custom chips लगेचच प्रत्येक incumbent alternative पेक्षा चांगले ठरतील हे सिद्ध करत नाही. आतापर्यंत प्रसिद्ध झालेला पुरावा त्यासाठी अपुरा आहे. पण ते हे नक्की दर्शवते की कंपनी model ranking पेक्षा कठीण प्रश्नावर प्रभाव टाकण्याचा प्रयत्न करत आहे: scale वर AI देणारा stack कोण नियंत्रित करतो. Jalapeño ने वचन दिल्याप्रमाणे काम केले, तर त्याचे महत्त्व एका product cycle पलीकडे जाईल. ते दर्शवेल की आघाडीचे AI developers सुद्धा hardware companies होत आहेत.

हा लेख The Decoder च्या रिपोर्टिंगवर आधारित आहे. मूळ लेख वाचा.

Originally published on the-decoder.com