GPT जैसे लार्ज लैंग्वेज मॉडल कैसे काम करते हैं

GPT जवाब ढूंढने के लिए डेटाबेस नहीं खोजता। यह ट्रेनिंग के पैटर्न से छोटे-छोटे हिस्सों में वाक्य बनाता है। इसे समझकर आप इसकी खूबियों, गलतियों और पूछने के सही तरीके जान पाएंगे।

7 मिनट का पठनअपडेट किया गया

जब आप हमारे चैट में कोई सवाल लिखते हैं, तो GPT पहले से सेव जवाबों की लाइब्रेरी में खोज नहीं करता। यह ट्रेनिंग के दौरान भारी मात्रा में टेक्स्ट से सीखे गए पैटर्न्स के आधार पर, एक बार में थोड़ा-सा हिस्सा जोड़ते हुए बिल्कुल नया जवाब लिखता है। यह एक बात बहुत कुछ समझाती है: यह भाषा में इतना माहिर क्यों है, लगभग हर चीज़ कैसे समझा सकता है, कभी-कभी पूरे आत्मविश्वास के साथ गलत बातें क्यों कह देता है, और आपके पूछने का तरीका क्यों मायने रखता है। यह गाइड बिना किसी गणित के, आसान शब्दों में इसके मुख्य पहलुओं को समझाती है और बताती है कि आपकी चैट के लिए इनका क्या मतलब है।

GPT के अक्षरों का मतलब

GPT का मतलब generative pre-trained transformer है। Generative यानी यह तयशुदा जवाबों में से चुनने के बजाय नया टेक्स्ट बनाता है। Pre-trained यानी बातचीत के लिए तैयार किए जाने से पहले इसने टेक्स्ट के बहुत बड़े संग्रह से सीखा है। Transformer इसके अंदर मौजूद न्यूरल नेटवर्क का प्रकार है—2017 में Google के रिसर्चर्स द्वारा पेश किया गया एक डिज़ाइन, जो किसी शब्द को उसके आस-पास के सभी शब्दों से जोड़ने में बेहद माहिर है। OpenAI ने अपना पहला GPT मॉडल 2018 में रिलीज़ किया था; हमारे चैट में मौजूद मॉडल्स, GPT-6 Luna और GPT-6.1 Terra, इसी सीरीज़ के हालिया सदस्य हैं। पूरी टाइमलाइन के लिए GPT का इतिहास पेज देखें, और पूरी तस्वीर समझने के लिए GPT क्या है पढ़ें।

टोकन: मॉडल कैसे पढ़ता है

मॉडल अक्षरों या पूरे शब्दों को उस तरह नहीं देखता जैसे हम देखते हैं। टेक्स्ट को पहले टोकन में तोड़ा जाता है। आमतौर पर इस्तेमाल होने वाला एक शब्द अक्सर एक टोकन बन जाता है; किसी लंबे या असामान्य शब्द को कुछ टुकड़ों में बांट दिया जाता है। अंग्रेज़ी के लिए OpenAI का अनुमान है कि एक टोकन लगभग तीन-चौथाई शब्द के बराबर होता है। अन्य भाषाओं में उसी मतलब के लिए अक्सर ज़्यादा टोकन की ज़रूरत पड़ती है।

टोकन से कुछ अजीब बातें समझ में आती हैं। किसी शब्द में अक्षरों की गिनती करते समय मॉडल्स अक्सर गलती कर बैठते हैं, क्योंकि वे अक्षरों को एक-एक करके कभी नहीं देखते। इनपुट और आउटपुट की सीमाएं कैरेक्टर में नहीं, बल्कि टोकन में मापी जाती हैं। डेवलपर्स के लिए कीमतें भी, जैसा कि हमारे GPT API पेज पर दिया गया है, प्रति दस लाख टोकन के हिसाब से तय होती हैं।

प्रेडिक्शन: एक बार में एक छोटा हिस्सा

बुनियादी तौर पर, मॉडल सिर्फ एक काम करता है: अब तक के पूरे टेक्स्ट को देखकर यह अंदाज़ा लगाता है कि अगला टोकन कौन-सा आने की सबसे ज़्यादा संभावना है। यह एक टोकन चुनता है, उसे टेक्स्ट में जोड़ता है, और यही प्रक्रिया सैकड़ों या हज़ारों बार दोहराता है, जब तक कि पूरा जवाब तैयार न हो जाए। यही वजह है कि चैट में जवाब एक साथ आने के बजाय धीरे-धीरे टाइप होते हुए दिखते हैं।

इस चुनाव में थोड़ी-सी रैंडमनेस (अनिश्चितता) रखी जाती है ताकि हर बार बिल्कुल एक जैसा जवाब न मिले। रीजेनरेट बटन इसी का इस्तेमाल करता है: दोबारा पूछने पर आपको उसी जानकारी का एक अलग रूप मिलता है। हमारा चैट पुराने प्रयासों को अलग-अलग वर्ज़न के रूप में सुरक्षित रखता है, ताकि आप उनकी तुलना कर सकें।

प्रेडिक्शन सुनना आसान लगता है, लेकिन अरबों उदाहरणों में सटीक अनुमान लगाने के लिए मॉडल को व्याकरण, तथ्य, शैलियां, तार्किक पैटर्न और बहुत कुछ सीखना पड़ता है। जिसे हम समझदारी कहते हैं, वह असल में सही प्रेडिक्शन करने की इसी प्रक्रिया से उभरती है।

मॉडल को कैसे ट्रेन किया जाता है

GPT मॉडल्स कई चरणों में तैयार किए जाते हैं:

  1. प्री-ट्रेनिंग। यह टेक्स्ट के विशाल संग्रह को प्रोसेस करता है और सिर्फ एक काम का अभ्यास करता है: अगले टोकन का अंदाज़ा लगाना। इस स्तर पर यह किसी भी टेक्स्ट को आगे बढ़ा सकता है, लेकिन अभी यह बातचीत करने के लिए एक अच्छा साथी नहीं होता।
  2. इंस्ट्रक्शन ट्यूनिंग। इसे सवालों और बेहतरीन जवाबों के उदाहरणों पर ट्रेन किया जाता है, ताकि यह निर्देशों का पालन करना और सवालों के जवाब देना सीख सके।
  3. फीडबैक और रीइन्फोर्समेंट लर्निंग। लोग और ऑटोमेटेड सिस्टम जवाबों का मूल्यांकन करते हैं, और मॉडल को ऐसे जवाब देने के लिए ढाला जाता है जो मददगार, सटीक और सुरक्षित हों। रीज़निंग मॉडल्स को भी इसी तरह ट्रेन किया जाता है ताकि वे जवाब देने से पहले समस्या को गहराई से समझ सकें।

ट्रेनिंग एक तय समय पर खत्म होती है, और वह तारीख मॉडल की नॉलेज कट-ऑफ कहलाती है। OpenAI के अनुसार, GPT-6 Luna का डेटा 18 मई 2026 तक और GPT-6.1 Terra का 1 जून 2026 तक का है। इसके बाद की किसी भी बात की जानकारी मॉडल को तब तक नहीं होती जब तक आप उसे खुद न बताएं, और हमारा चैट वेब ब्राउज़ नहीं करता।

कॉन्टेक्स्ट विंडो: मॉडल क्या देख पाता है

अलग-अलग बातचीत के बीच मॉडल की कोई मेमोरी नहीं होती। एक ही चैट के दौरान, यह एक कॉन्टेक्स्ट देखता है: निर्देश, अब तक के मैसेज और आपका नया मैसेज—ये सभी टोकन के रूप में होते हैं। OpenAI ने Luna और Terra को लगभग 10.5 लाख टोकन की कॉन्टेक्स्ट विंडो दी है, जो कई बड़ी किताबों के लिए काफी है।

हमारे जैसे मुफ़्त चैट में इसका एक छोटा हिस्सा ही भेजा जाता है: बातचीत का ताज़ा हिस्सा, ताकि जवाब तेज़ी से मिलें। बहुत लंबी चैट में शुरुआती मैसेज नज़र से बाहर हो सकते हैं। अगर कोई जानकारी ज़रूरी है, तो उसे दोबारा दोहराएं, या अपनी बात के छोटे सारांश के साथ नई चैट शुरू करें। हर चैट अलग होती है; मॉडल को यह याद नहीं रहता कि आपने दूसरी चैट में क्या कहा था।

रीज़निंग: जवाब देने से पहले सोचना

रीज़निंग मॉडल्स सामने दिखने वाले जवाब से पहले बैकग्राउंड में सोचने की एक छिपी हुई प्रक्रिया चलाते हैं। इससे उन्हें समस्या को छोटे-छोटे चरणों में बांटने और अपनी गलतियां पकड़ने का मौका मिलता है, हालांकि इसमें थोड़ा समय लगता है। हमारे चैट में, Think बटन GPT-6.1 Terra पर स्विच कर देता है, जो जवाब देने से पहले थोड़ा सोचता है; वहीं डिफ़ॉल्ट मॉडल GPT-6 Luna लगभग तुरंत जवाब देता है। हमारा रीज़निंग मॉडल्स गाइड समझाता है कि यह थोड़ा-सा इंतज़ार कब फायदेमंद होता है।

मनगढ़ंत जवाब क्यों आते हैं

चूँकि मॉडल हमेशा बात को आगे बढ़ाने के लिए सबसे स्वाभाविक लगने वाला टेक्स्ट लिखता है, इसलिए तथ्य न होने पर भी यह कुछ न कुछ लिख देता है। किसी कम चर्चित विषय पर सोर्स मांगने पर यह सोर्स जैसा दिखने वाला जवाब बना देता है, भले ही वैसा कोई सोर्स मौजूद न हो। किसी छोटे शहर के बारे में पूछने पर यह ऐसे विवरण दे देता है जो आम तौर पर शहरों पर लागू होते हैं। मॉडल के पास ऐसा कोई पक्का अंदरूनी सिग्नल नहीं होता जो कहे "मुझे यह नहीं पता", हालांकि नए मॉडल्स अनिश्चितता स्वीकार करने में पहले से बेहतर हैं। इसीलिए नाम, नंबर, तारीखों और कोट्स की जांच करना ज़रूरी है; हमारा फैक्ट-चेकिंग गाइड इसके लिए एक आसान तरीका बताता है।

आपके प्रॉम्प्ट के लिए इसके क्या मायने हैं

ऊपर दी गई सभी बातें कुछ आसान नियमों में बदल जाती हैं:

कमज़ोर:
कॉन्ट्रैक्ट जल्दी खत्म करने के बारे में क्या कहता है?

बेहतर:
यह मेरे रेंटल कॉन्ट्रैक्ट का क्लॉज़ 9 है: [क्लॉज़ पेस्ट करें]।
आसान शब्दों में समझाएं कि मैं कॉन्ट्रैक्ट कब जल्दी खत्म कर सकता हूँ,
मुझे कितना नोटिस देना होगा और इसमें मेरा क्या खर्च हो सकता है। हर
पॉइंट किस वाक्य पर आधारित है, उसे भी कोट करें।
  • सामग्री पेस्ट करें। मॉडल अपनी अधूरी याददाश्त के मुकाबले अपने कॉन्टेक्स्ट में मौजूद टेक्स्ट पर कहीं बेहतर काम करता है।
  • स्पष्ट रहें। आप जितनी ज़्यादा डिटेल जोड़ेंगे, प्रेडिक्शन उतना ही सटीक और आपकी ज़रूरत के मुताबिक होगा।
  • दिए गए टेक्स्ट से कोट्स या सोर्स मांगें, ताकि आप हर बात की पुष्टि कर सकें।
  • जब लंबी चैट भटकने लगे तो नए सिरे से शुरुआत करें; नई चैट में छोटा सारांश देना अक्सर ज़्यादा कारगर होता है। हमारा समराइज़र आपके लिए वह सारांश लिख सकता है।
इसे बिना किसी नोट्स वाले एक बहुत पढ़े-लिखे लेखक की तरह समझें। इसने बहुत कुछ पढ़ा है, धाराप्रवाह लिखता है और लगभग कुछ भी समझा सकता है, लेकिन यह अलग से कुछ खोज नहीं सकता। जो तथ्य आपके पास हैं वे इसे दें, और जो नहीं हैं उनकी खुद जांच करें।

इसे काम करते देखना चाहते हैं? GPT से कहें कि वह खुद को समझाए पांच चरणों में, फिर जो बातें समझ न आएं उन पर आगे सवाल पूछें।

FAQ

क्या GPT जो लिखता है उसे समझता भी है?

यह इस बात पर निर्भर करता है कि 'समझने' से आपका क्या मतलब है। यह विचारों के बीच के रिश्तों को इतनी अच्छी तरह पकड़ लेता है कि उन्हें समझा सकता है, समराइज़ कर सकता है और उन पर तर्क दे सकता है। लेकिन इसे दुनिया का कोई वास्तविक अनुभव नहीं है और यह किसी तथ्य और एक स्वाभाविक अंदाज़े के बीच पक्के तौर पर फर्क नहीं कर सकता।

क्या यह मेरी चैट से सीखता है?

बातचीत के दौरान नहीं, और हमारे चैट में अलग-अलग बातचीत के बीच भी नहीं। मॉडल की जानकारी ट्रेनिंग के समय ही तय हो जाती है। OpenAI के अनुसार, उसके API के ज़रिए भेजा गया डेटा ट्रेनिंग के लिए तब तक इस्तेमाल नहीं होता जब तक ग्राहक खुद इसकी अनुमति न दे।

दोबारा पूछने पर अलग जवाब क्यों मिलता है?

मॉडल हर अगला टोकन चुनते समय थोड़ी रैंडमनेस का इस्तेमाल करता है, इसलिए एक ही सवाल के जवाब में शब्दों या वाक्य की बनावट बदल सकती है। तथ्यों के मामले में, अलग जवाब मिलना इस बात का संकेत है कि आपको जांच कर लेनी चाहिए।

क्या GPT और ChatGPT एक ही हैं?

नहीं। GPT उन मॉडल्स की सीरीज़ है जिसे OpenAI ने बनाया है; ChatGPT उन्हीं पर बना OpenAI का अपना ऐप है। gpt.me एक स्वतंत्र साइट है जो API के ज़रिए GPT मॉडल्स का इस्तेमाल करती है; हमारी ChatGPT से तुलना दोनों के अंतर बताती है।

कोई सवाल है? अभी पूछें

न कोई अकाउंट, न कोई डाउनलोड। चैट खोलें, जो मन में हो टाइप करें, और एक-दो सेकंड में जवाब आने लगेगा।

चैट शुरू करें