ETV Bharat / science-and-technology

ChatGPT : काय सांगता! लेखा परीक्षांमध्ये विद्यार्थी चॅटजीपीपेक्षा ठरले सरस

अलीकडील अभ्यासात, संशोधकांना असे आढळले की विद्यार्थ्यांनी चॅटजीपीटी, ओपनआयच्या चॅटबॉटपेक्षा लेखा परीक्षांमध्ये चांगले गुण मिळविले आहे.

ChatGPT
ChatGPT ची कामगिरी विद्यार्थ्यांपेक्षा वाईट
author img

By

Published : Apr 23, 2023, 12:16 PM IST

नवी दिल्ली : ओपनएआयच्या चॅटबॉट उत्पादन चॅटजीपीटी ही मानवी बुद्धिमत्तेला मागे टाकेल अशी जगभरात चर्चा आहे. मात्र, त्यांच्या तुलनेत विद्यार्थ्यांनी लेखा परीक्षांमध्ये चांगली कामगिरी केल्याचे संशोधकांना आढळले. असे असूनही चॅटजीपीटीची कामगिरी 'प्रभावी' असल्याचे त्यांनी सांगितले. हा एक 'गेम चेंजर' आहे, जो प्रत्येकाची शिकवण्याची आणि शिकण्याची पद्धत बदलेल. ब्रिघम यंग युनिव्हर्सिटी (BYU), यूएस आणि इतर 186 विद्यापीठांमधील संशोधकांना हे जाणून घ्यायचे होते की ओपनआयचे तंत्रज्ञान ऑडिटमध्ये कसे काम करेल. त्यांनी त्यांचे निष्कर्ष इश्यूज इन अकाउंटिंग एज्युकेशन जर्नलमध्ये प्रकाशित केले आहेत.

लेखा माहिती प्रणाली आणि ऑडिटिंगमध्ये चांगली कामगिरी : चॅटजीपीटीच्या 47.4 टक्के गुणांच्या तुलनेत संशोधकांच्या ऑडिटमधील विद्यार्थ्यांनी एकूण सरासरी 76.7 टक्के गुण मिळवले, तर चॅटजीपीटीने 11.3 टक्के प्रश्नांवर विद्यार्थ्यांच्या सरासरीपेक्षा जास्त गुण मिळवले. लेखा माहिती प्रणाली (AIS) आणि ऑडिटिंगमध्ये विशेषतः चांगली कामगिरी करताना AI बॉट ही कर, आर्थिक आणि व्यवस्थापकीय मूल्यांकनांवर खराब काम करत असल्याचे आढळले.

गणितीय प्रक्रियेशी संघर्ष : संशोधकांचा असा विश्वास आहे की चॅटजीपीटीनंतरच्या प्रकारासाठी आवश्यक असलेल्या गणितीय प्रक्रियेशी संघर्ष करत असल्यामुळे असे होऊ शकते. नैसर्गिक भाषेतील मजकूर तयार करण्यासाठी मशीन लर्निंगचा वापर करणारा AI बॉट पुढे खऱ्या/खोट्या प्रश्नांवर (68.7 टक्के बरोबर) आणि बहु-निवडक प्रश्नांवर (59.5 टक्के), तर लहान-उत्तरांच्या प्रश्नांवर (28.7 टक्के) चांगले काम करत असल्याचे आढळून आले. त्यात 39.1 टक्के अडचणी अनुभवल्या आहेत.

ChatGPT काहीवेळा तथ्ये बनवते : सर्वसाधारणपणे संशोधकांनी सांगितले की चॅटजीपीटीसाठी उच्च-ऑर्डर प्रश्नांची उत्तरे देणे कठीण होते. खरेतर, चॅटजीपीटी अधूनमधून चुकीच्या उत्तरांसाठी अधिकृत लेखी स्पष्टीकरणे प्रदान करते किंवा समान प्रश्नाचे वेगवेगळ्या प्रकारे उत्तर देते. त्यांना असेही आढळून आले की चॅटजीपीटी अनेकदा त्यांच्या उत्तरांसाठी स्पष्टीकरण प्रदान करते, जरी ते चुकीचे होते. इतर वेळी, अचूक वर्णन देऊनही, चुकीचे एकाधिक निवड उत्तर निवडले. संशोधकांनी असेही नमूद केले की चॅटजीपीटी काहीवेळा योग्य माहिती देते. उदाहरणार्थ, संदर्भ प्रदान करताना, तो पूर्णपणे बनावट असलेला अस्सल दिसणारा संदर्भ तयार करतो. बॉटला निरर्थक गणिती चुका करतानाही आढळून आले—जसे की वजाबाकीच्या समस्येमध्ये दोन संख्या जोडणे किंवा चुकीच्या पद्धतीने भागाकार करणे.

लेखकांनी या संशोधनात भाग घेतला : अकाऊंटिंगचे BYU प्रोफेसर डेव्हिड वुड, प्रमुख अभ्यास लेखक, वास्तविक विद्यापीठ लेखा विद्यार्थ्यांच्या विरूद्ध कृत्रिम मानवी बुद्धिमत्तेने कसे कार्य केले हे पाहण्यासाठी शक्य तितक्या जास्त प्राध्यापकांची नियुक्ती करण्याचा निर्णय घेतला. 14 देशांतील 186 शैक्षणिक संस्थांमधील 327 सह-लेखकांनी या संशोधनात भाग घेतला. त्यांनी ChatGPT ला आणखी 2,268 पाठ्यपुस्तक चाचणी बँक प्रश्न देण्यासाठी पदवीपूर्व BYU विद्यार्थ्यांना देखील भरती केले.

हेही वाचा : Twitter Removal Of Legacy Verification : ट्विटरने ब्लू मार्क काढल्याने सुरू झाला गोंधळ; माहितीची सत्यता पडताळणीबाबत साशंकता

नवी दिल्ली : ओपनएआयच्या चॅटबॉट उत्पादन चॅटजीपीटी ही मानवी बुद्धिमत्तेला मागे टाकेल अशी जगभरात चर्चा आहे. मात्र, त्यांच्या तुलनेत विद्यार्थ्यांनी लेखा परीक्षांमध्ये चांगली कामगिरी केल्याचे संशोधकांना आढळले. असे असूनही चॅटजीपीटीची कामगिरी 'प्रभावी' असल्याचे त्यांनी सांगितले. हा एक 'गेम चेंजर' आहे, जो प्रत्येकाची शिकवण्याची आणि शिकण्याची पद्धत बदलेल. ब्रिघम यंग युनिव्हर्सिटी (BYU), यूएस आणि इतर 186 विद्यापीठांमधील संशोधकांना हे जाणून घ्यायचे होते की ओपनआयचे तंत्रज्ञान ऑडिटमध्ये कसे काम करेल. त्यांनी त्यांचे निष्कर्ष इश्यूज इन अकाउंटिंग एज्युकेशन जर्नलमध्ये प्रकाशित केले आहेत.

लेखा माहिती प्रणाली आणि ऑडिटिंगमध्ये चांगली कामगिरी : चॅटजीपीटीच्या 47.4 टक्के गुणांच्या तुलनेत संशोधकांच्या ऑडिटमधील विद्यार्थ्यांनी एकूण सरासरी 76.7 टक्के गुण मिळवले, तर चॅटजीपीटीने 11.3 टक्के प्रश्नांवर विद्यार्थ्यांच्या सरासरीपेक्षा जास्त गुण मिळवले. लेखा माहिती प्रणाली (AIS) आणि ऑडिटिंगमध्ये विशेषतः चांगली कामगिरी करताना AI बॉट ही कर, आर्थिक आणि व्यवस्थापकीय मूल्यांकनांवर खराब काम करत असल्याचे आढळले.

गणितीय प्रक्रियेशी संघर्ष : संशोधकांचा असा विश्वास आहे की चॅटजीपीटीनंतरच्या प्रकारासाठी आवश्यक असलेल्या गणितीय प्रक्रियेशी संघर्ष करत असल्यामुळे असे होऊ शकते. नैसर्गिक भाषेतील मजकूर तयार करण्यासाठी मशीन लर्निंगचा वापर करणारा AI बॉट पुढे खऱ्या/खोट्या प्रश्नांवर (68.7 टक्के बरोबर) आणि बहु-निवडक प्रश्नांवर (59.5 टक्के), तर लहान-उत्तरांच्या प्रश्नांवर (28.7 टक्के) चांगले काम करत असल्याचे आढळून आले. त्यात 39.1 टक्के अडचणी अनुभवल्या आहेत.

ChatGPT काहीवेळा तथ्ये बनवते : सर्वसाधारणपणे संशोधकांनी सांगितले की चॅटजीपीटीसाठी उच्च-ऑर्डर प्रश्नांची उत्तरे देणे कठीण होते. खरेतर, चॅटजीपीटी अधूनमधून चुकीच्या उत्तरांसाठी अधिकृत लेखी स्पष्टीकरणे प्रदान करते किंवा समान प्रश्नाचे वेगवेगळ्या प्रकारे उत्तर देते. त्यांना असेही आढळून आले की चॅटजीपीटी अनेकदा त्यांच्या उत्तरांसाठी स्पष्टीकरण प्रदान करते, जरी ते चुकीचे होते. इतर वेळी, अचूक वर्णन देऊनही, चुकीचे एकाधिक निवड उत्तर निवडले. संशोधकांनी असेही नमूद केले की चॅटजीपीटी काहीवेळा योग्य माहिती देते. उदाहरणार्थ, संदर्भ प्रदान करताना, तो पूर्णपणे बनावट असलेला अस्सल दिसणारा संदर्भ तयार करतो. बॉटला निरर्थक गणिती चुका करतानाही आढळून आले—जसे की वजाबाकीच्या समस्येमध्ये दोन संख्या जोडणे किंवा चुकीच्या पद्धतीने भागाकार करणे.

लेखकांनी या संशोधनात भाग घेतला : अकाऊंटिंगचे BYU प्रोफेसर डेव्हिड वुड, प्रमुख अभ्यास लेखक, वास्तविक विद्यापीठ लेखा विद्यार्थ्यांच्या विरूद्ध कृत्रिम मानवी बुद्धिमत्तेने कसे कार्य केले हे पाहण्यासाठी शक्य तितक्या जास्त प्राध्यापकांची नियुक्ती करण्याचा निर्णय घेतला. 14 देशांतील 186 शैक्षणिक संस्थांमधील 327 सह-लेखकांनी या संशोधनात भाग घेतला. त्यांनी ChatGPT ला आणखी 2,268 पाठ्यपुस्तक चाचणी बँक प्रश्न देण्यासाठी पदवीपूर्व BYU विद्यार्थ्यांना देखील भरती केले.

हेही वाचा : Twitter Removal Of Legacy Verification : ट्विटरने ब्लू मार्क काढल्याने सुरू झाला गोंधळ; माहितीची सत्यता पडताळणीबाबत साशंकता

ETV Bharat Logo

Copyright © 2024 Ushodaya Enterprises Pvt. Ltd., All Rights Reserved.