मेटा ने OPT-175B पेश किया, अनुसंधान के लिए बड़े पैमाने पर भाषा AI मॉडल तक पहुंच का लोकतंत्रीकरण

Meta, जिसे पहले फेसबुक के नाम से जाना जाता था, ने अपने ओपन प्रीट्रेन्ड ट्रांसफॉर्मर (ओपीटी-175बी) का अनावरण किया है, जो 100 अरब से अधिक मापदंडों पर गर्व करने वाला एक विशाल भाषा एआई मॉडल है। यह उल्लेखनीय विकास तकनीकी दिग्गजों के अत्याधुनिक एआई अनुसंधान तक पहुंच का लोकतंत्रीकरण करने के प्रयास का प्रतिनिधित्व करता है, जैसा कि उनके हालिया ब्लॉग पोस्ट में बताया गया है।

एक गैर-वाणिज्यिक लाइसेंस के तहत, मॉडल मुख्य रूप से शोध उद्देश्यों के लिए उपलब्ध कराया जाएगा। दुनिया भर में अकादमिक शोधकर्ताओं, साथ ही सरकार, नागरिक समाज और उद्योग अनुसंधान प्रयोगशालाओं तक पहुंच प्रदान की जाएगी। हालाँकि, शोधकर्ताओं के लिए पहुँच की सीमा अनिश्चित बनी हुई है। मॉडल का उपयोग करने में रुचि रखने वाले केवल एक अनुरोध फॉर्म भर सकते हैं।

बड़े भाषा मॉडल को समझना

बड़े भाषा मॉडल उन्नत प्राकृतिक भाषा प्रसंस्करण प्रणालियां हैं, जो विभिन्न स्वरूपों में रचनात्मक और सुसंगत सामग्री उत्पन्न करने के लिए बड़ी मात्रा में पाठ पर प्रशिक्षित हैं। ऐसे मॉडल समाचार लेख, कानूनी सारांश, मूवी स्क्रिप्ट तैयार कर सकते हैं और ग्राहक सेवा चैटबॉट के रूप में भी काम कर सकते हैं।

OpenAI का GPT-3 उद्योग के प्रमुख बड़े भाषा मॉडल में से एक है, जिसमें व्यक्तिगत और व्यावसायिक उपयोग दोनों के लिए 175 बिलियन से अधिक पैरामीटर शामिल हैं। इसी तरह, मेटा का OPT-175B न केवल एक बड़े पैमाने का भाषा मॉडल प्रदान करता है, बल्कि साथ में एक कोडबेस और प्रशिक्षण प्रक्रिया का विवरण देने वाला व्यापक दस्तावेज भी प्रदान करता है। मेटा ने कम पैरामीटर वाले छोटे पैमाने के बेसलाइन मॉडल की एक श्रृंखला भी लॉन्च की है।

डीप लर्निंग के कार्बन फुटप्रिंट को संबोधित करना

अधिकांश नवीन एआई अनुसंधान Google, Meta, माइक्रोसॉफ्ट और एनवीडिया जैसे प्रमुख तकनीकी निगमों द्वारा संचालित होते हैं। बड़े एआई मॉडल के प्रशिक्षण और संचालन के लिए भारी मात्रा में कम्प्यूटेशनल शक्ति और ऊर्जा की आवश्यकता होती है, जिसके परिणामस्वरूप महत्वपूर्ण खर्च और संभावित रूप से बड़े कार्बन पदचिह्न होते हैं। रॉय श्वार्ट्ज और जेसी डॉज द्वारा 2019 के एक अध्ययन से पता चला है कि गहरी सीखने की गणना हर कुछ महीनों में दोगुनी हो जाती है, जिससे 2012 से 2018 तक अनुमानित 300,000 गुना वृद्धि हुई है - और एक महत्वपूर्ण पर्यावरणीय प्रभाव।

मेटा का दावा है कि उसने OPT-175B के कार्बन पदचिह्न को OpenAI के GPT-3 के एक-सातवें हिस्से तक कम करके कार्बन समस्या का समाधान किया है। कंपनी का कहना है कि उसने GPT-3 के अनुमानित 500 टन की तुलना में केवल 75 टन के कुल कार्बन-उत्सर्जन पदचिह्न के साथ 992 Nvidia A100 GPU (प्रत्येक 80 गीगाबाइट) पर मॉडल को प्रशिक्षित किया। OpenAI ने अभी तक इन दावों पर कोई टिप्पणी नहीं की है।

भविष्य के निहितार्थ

मेटा की हालिया घोषणा के साथ डीप लर्निंग रिसर्च इनोवेशन में उछाल देखने की उम्मीद है। हालाँकि, तकनीकी प्रगति के साथ-साथ, AI के जिम्मेदार उपयोग से जुड़े नैतिक प्रश्नों को विश्व स्तर पर संबोधित किया जाना चाहिए। मेटा आशा साझा करता है कि एआई समुदाय - अकादमिक शोधकर्ताओं, नागरिक समाज, नीति निर्माताओं और उद्योग पेशेवरों को शामिल करते हुए - उत्तर खोजने के लिए एक साथ जुड़ेंगे। OPT-175B जैसे अधिक शक्तिशाली उपकरण उभरने के साथ, AI नवाचार तक पहुंच का लोकतांत्रीकरण AppMaster जैसे प्लेटफार्मों के लिए अपने स्वयं के no-code समाधानों में इस तरह के अग्रिमों को एकीकृत करने का अवसर प्रस्तुत करता है, जो उपयोगकर्ताओं को विभिन्न उद्योगों के लिए व्यापक एप्लिकेशन विकसित करने के लिए सशक्त बनाता है।