ChatGPT fails in UPSC prelims: পাশ US-র পরীক্ষায়, অথচ UPSC প্রিলিমসে 'ফেল' করল ChatGPT! নেই কাট-অফের ধারেকাছেও

ChatGPT fails in UPSC prelims: রিপোর্ট অনুযায়ী, ইউনিয়ন পাবলিক সার্ভিস কমিশনের (ইউপিএসসি) প্রিলিমিনারি পরীক্ষায় 'ফেল' করে গিয়েছে কৃত্রিম বুদ্ধিমত্তা বা আর্টিফিসিয়াল ইন্টেলিজেন্স-নির্ভর চ্যাটবট। শুধু তাই নয়, ৩০ শতাংশ কম নম্বর পেয়েছে। যে চ্যাটবট ২০২২ সালের নভেম্বর থেকে তথ্যপ্রযুক্তি দুনিয়ায় ঝড় তুলেছে ChatGPT। চাকরির ক্ষেত্রেও ‘উদ্বেগ’ বেড়েছে।

ChatGPT ২০২২ সালের নভেম্বর থেকে তথ্যপ্রযুক্তি দুনিয়ায় ঝড় তুলেছে। (ছবিটি প্রতীকী, সৌজন্যে রয়টার্স)

মার্কিন বিশ্ববিদ্যালয়ে এমবিএ পরীক্ষায় 'পাশ' করেছে। মার্কিন মেডিক্যাল পরীক্ষায় মিলছে সাফল্য। কিন্তু ভারতের সবথেকে 'কঠিন' পরীক্ষায় এসে আটকে গেল ChatGPT। একটি রিপোর্ট অনুযায়ী, ইউনিয়ন পাবলিক সার্ভিস কমিশনের (ইউপিএসসি) প্রিলিমিনারি পরীক্ষায় 'ফেল' করে গিয়েছে কৃত্রিম বুদ্ধিমত্তা বা আর্টিফিসিয়াল ইন্টেলিজেন্স-নির্ভর চ্যাটবট। শুধু তাই নয়, ৩০ শতাংশ কম নম্বর পেয়েছে। যে চ্যাটবট ২০২২ সালের নভেম্বর থেকে তথ্যপ্রযুক্তি দুনিয়ায় ঝড় তুলেছে। চাকরির ক্ষেত্রেও ‘উদ্বেগ’ বেড়েছে।

ইউপিএসসি পরীক্ষায় ChatGPT কেমন ফল করে, তা নিয়ে পরীক্ষা-নিরীক্ষা করে দেখেছে অ্যানালিটিক্স ইন্ডিয়া ম্যাগাজিন। ওই সংস্থার রিপোর্ট অনুযায়ী, ChatGPT-কে প্রশ্ন করা হয়েছিল যে 'UPSC প্রিলিমিনারি পরীক্ষায় পাস করতে পারবে?' ChatGPT জানত যে সেই কাজটা কঠিন হবে। ChatGPT জানিয়েছে যে ওই UPSC প্রিলিমিনারি পরীক্ষার গণ্ডি উতরোতে পারবে কিনা, সে বিষয়ে নিশ্চিতভাবে কোনও উত্তর দিতে পারবে না।

অ্যানালিটিক্স ইন্ডিয়া ম্যাগাজিনের ওই রিপোর্ট অনুযায়ী, নিশ্চিত কোনও উত্তর না পাওয়া সত্ত্বেও ChatGPT-কে ইউপিএসসি প্রিলিমিনারি পরীক্ষায় বসানো হয়েছিল। ২০২২ সালের ইউপিএসসি প্রিলিমিনারিতে যে ‘সেট এ’ প্রশ্ন এসেছিল, সেটির উত্তর নিয়ে পরীক্ষা করেছে অ্যানালিটিক্স ইন্ডিয়া ম্যাগাজিন। মোট ১০০ টি প্রশ্ন ছিল। সেগুলির মধ্যে ভারতের সবথেকে ‘কঠিন’ পরীক্ষায় মাত্র ৫৪ টি প্রশ্নের সঠিক উত্তর দিতে পেরেছে ChatGPT। অথচ জেনারেল ক্যাটেগরিতে কাট-অফ মার্কস ছিল ৮৭.৫৪। অর্থাৎ সোজা কথায় ২০২২ সালের ইউপিএসসি প্রিলিমিনারি পরীক্ষায় ‘ফেল’ করে গিয়েছে ChatGPT।

কী কী নিয়ে প্রশ্ন ছিল?

ওই সংস্থার রিপোর্ট অনুযায়ী, ইউপিএসসি প্রিমিলস পরীক্ষায় যে যে বিষয়ের প্রশ্ন থাকে, সেই বিষয়গুলিই ছিল। অর্থাৎ ভূগোল, অর্থনীতি, ইতিহাস, ইকোলজি, সাধারণ বিজ্ঞান এবং সাধারণ জ্ঞান (সাম্প্রতিক ঘটনাবলী) নিয়ে প্রশ্নের উত্তর দিতে হয়েছিল ChatGPT-কে। ChatGPT-র ডেটাবেস যেহেতু ২০২১ সালের সেপ্টেম্বর পর্যন্ত আপডেট করা, তাই সাধারণ জ্ঞান ও সাম্প্রতিক ঘটনাবলী (কারেন্ট অ্যাফেয়ার্স) নিয়ে প্রশ্নের উত্তর যে দিতে পারবে না, তা স্পষ্ট ছিল। কিন্তু ভূগোল এবং অর্থনীতির প্রশ্নেরও ভুল উত্তর দিয়েছে ChatGPT। যা নির্দিষ্ট কোনও সময়সীমা-ভিত্তিক প্রশ্ন ছিল না।