क्या ChatGPT उत्तर उत्पन्न करने में सटीक है?

ओपेनएआई द्वारा विकसित किए गए एआई चैटबॉट 'चैटजीपीटी' ने अपनी सटीकता और प्रदर्शन के लिए विभिन्न क्षेत्रों में लहराए हैं। हालांकि, महत्वपूर्ण नोट करना होगा कि इसका ज्ञान केवल 2021 तक उपलब्ध डेटा सीमित है। प्रोफेसर क्रिस्टियान टावरीश ने पेन्नसिल्वेनिया विश्वविद्यालय में एक एमबीए परीक्षा देकर चैटजीपीटी की सटीकता का टेस्ट लिया।

परीक्षा सम्पूर्ण व्यापार के तत्वों जैसे प्रक्रिया विश्लेषण, इन्वेंटरी टर्न और क्यूइंग विश्लेषण आदि को कवर करने वाले सात प्रश्नों से मिलकर बनी थी। इसे एक असली इंसानी वातावरण की तरह बनाया गया था और प्रश्नों को एक वास्तविक छात्र को पूछा जाता था। प्रोफेसर टरविश से अचरज हुआ जब चैटजीपीटी प्रक्रिया विश्लेषण में बॉटलनेक के अवधारणा पर पहले प्रश्न का उत्तर देते हुए बैंग के साथ परीक्षा शुरू हुआ और उसे एक A + प्राप्त हुआ।

यद्यपि चैटबॉट कुछ अधिक जटिल प्रश्नों से जूझ रहा था, लेकिन प्रोफेसर इसके अनुकूल काम की तारीफ कर रहे थे। चैटजीपीटी पर एमबीए परीक्षा आयोजित करने के बाद, प्रोफेसर टारवीश ने निर्णय लिया कि एआई चैटबॉट को B और B- के बीच ग्रेड मिलता।

चैटजीपीटी की सटीकता का विवरण

चैटजीपीटी की सटीकता का एक और प्रदर्शन चिकित्सा क्षेत्र में था, जहां चैटबॉट को संयुक्त राज्य चिकित्सा परीक्षा (USMLE) पास करने में सफलता मिली। अनुसंधान के अनुसार, चैटजीपीटी ने उत्तरों के लिए 50% से अधिक सटीकता हासिल की और उत्तरों के लिए अनुसंधान और स्पष्टीकरण भी दिए।

मेडिकल स्टार्टअप एंसिबल हेल्थ से डॉक्टरों द्वारा नेतृत्व की गई एक अलग अध्ययन में, चैटजीपीटी संयुक्त राज्य अमेरिका में डॉक्टर के रूप में लाइसेंस हासिल करने के लिए आवश्यक तीन परीक्षाओं में से सभी में या उससे नजदीक प्रदर्शन करता हुआ था। हालांकि चैटजीपीटी की सटीकता निश्चित रूप से अद्भुत है, लेकिन यह ध्यान में रखना महत्वपूर्ण है कि इसका प्रदर्शन प्रश्न के संदर्भ और प्रेरणा के आधार पर भिन्न हो सकता है।

मॉडल को प्रशिक्षित करने के लिए उपयोग किए गए पाठ स्रोतों की दलीलों और सीमाओं को शामिल करता है, इसलिए मॉडल का जिम्मेदारी से उपयोग जरूरी है।

इसे खोलने एएआई के सीईओ ने भी दोहराया। उन्होंने एक ट्वीट में कहा कि "चैटजीपीटी अत्यंत सीमित है और अभी कुछ भी महत्वपूर्ण काम के लिए इस पर भरोसा करना एक गलती है।"

00:48

01:12

चैट जीपीटी के साथ टेस्ट वार्तालाप असफल रहा

जैसा कि ऊपर की छवि में दिखाया गया है, चैटजीपीटी के साथ एक टेस्ट वार्तालाप में पता चला कि एआई चैटबॉट की प्रदर्शन क्षमता हमेशा संगतिशील नहीं होती है।

जब पूछा गया कि अर्जेंटीना ने फीफा विश्व कप कितनी बार जीता है, तब ChatGPT ने पहले उत्तर दिया “अर्जेंटीना ने फीफा विश्व कप एक बार, 1986 में जीता था।” हालांकि, जब पूछा गया “1978 में फीफा विश्व कप जीता कौन था”? तो ChatGPT ने जवाब दिया, “अर्जेंटीना ने 1978 फीफा विश्व कप जीता था।"

इससे यह निष्कर्ष निकला कि अर्जेंटीना ने दो बार विश्व कप जीता था। फिर जब एक बार फिर से सवाल पूछा गया, "अब मैं आपसे फिर से पूछ रहा हूं कि अर्जेंटीना ने विश्व कप कितनी बार जीता है?" ChatGPT ने पिछली बातचीत के बावजूद उसी उत्तर दिया, "अर्जेंटीना ने फीफा विश्व कप एक बार, 1986 में जीता था"।

यह Chat GPT की सटीकता को उजागर करता है और निरंतर सुधार और परिष्कार की आवश्यकता को भी।

अभी पढ़ें:  क्या चैट जीपीटी कोड लिख सकता है और ठीक कर सकता है?

क्या ChatGPT हर किसी को एक ही उत्तर देता है?

चैटजीपीटी से उत्तर में थोड़ा अंतर हो सकता है, हालांकि, यदि उपयोगकर्ता एक ही सवाल पूछते हैं तो हम देखते हैं कि बहुत समान जवाब दिए जाते हैं।

क्या ChatGPT विश्वसनीय है?

ChatGPT की कुछ सीमाएं हैं, इसका मतलब है कि कभी-कभी यह गलत या झूठे परिणाम दे सकता है, इसलिए सावधान रहें।