इसका मतलब है कि असल जिंदगी की बातचीत में, जैसे लक्षणों या टेस्ट रिपोर्ट्स के बारे में चर्चा करना वे उतने अच्छे नहीं हैं। भले ही उनके पास मेडिकल जानकारी हो, लेकिन वे एक असली डॉक्टर की तरह स्वाभाविक और व्यक्तिगत रूप से बात करने में कभी-कभी कमजोर पड़ जाते हैं। इस अध्ययन में शोधकर्ताओं ने चैटजीपीटी जैसे एआई टूल्स चैटबॉट को संचालित करने वाले बड़े-भाषा मॉडल (एलएलएम) के बीमारियों से जुड़ी व्यवस्थाओं में इनका इस्तेमाल करने से पहले मूल्यांकन के लिए सलाह भी दी है।
दरअसल, एलएलएम को विशाल टेक्स्ट डाटासेट पर प्रशिक्षित किया जाता है और इस तरह से ये उपयोगकर्ता के अनुरोधों का प्राकृतिक भाषा में जवाब दे सकते हैं। शोधकर्ताओं ने क्राफ्ट- एमडी नाम का तरीका अपनाकर जांचा कि जीपीटी-4 और मिस्ट्रल जैसे एआई टूल्स मेडिकल बातचीत में कितना अच्छा प्रदर्शन करते हैं। इस तरीके से एआई के लक्षण, दवाइयां और पारिवारिक इतिहास जैसी जानकारी इकट्ठा करने और सही निदान देने की क्षमता का परीक्षण किया गया।
ऐसे परखे गए एआई टूल्स
शोधकर्ताओं ने असल जिंदगी की स्थितियों को लेकर एआई टूल्स को परखा। इसके लिए एआई को 2,000 सामान्य बीमारियों और 12 मेडिकल विशेषज्ञताओं के उदाहरण दिए गए। इसमें एआई को मरीज की भूमिका में रखकर सवालों का जवाब देना था। इस दौरान एक अन्य एआई इन एआई टूल्स के दिए निदानों को ग्रेड दिया। इसके बाद इंसानी विशेषज्ञों ने जांचा कि एआई ने कितनी सटीक जानकारी इकट्ठा की, कितना सही निदान किया और निर्देशों का कितना पालन किया।
सही मेडिकल इतिहास लेने में नाकाम
मेडिकल बातचीत में एआई की सीमाएं नाम के इस अध्ययन में पाया गया कि वर्तमान एआई टूल्स लक्षणों को समझने, सही सवाल पूछने और बिखरी हुई जानकारी को जोड़ने में कमजोर हैं। इसके कारण ये टूल सही मेडिकल इतिहास लेने और सही निदान करने में नाकाम रहे।
बातचीत के दौरान सामने आई कमजोरियां
डॉक्टरों की सामान्य बातचीत की तरह जब एआई को बार-बार सवाल-जवाब में शामिल किया गया, तो उसका प्रदर्शन और खराब हो गया। इस दौरान एआई अक्सर महत्वपूर्ण जानकारी छोड़ देता है और सही समय पर सही सवाल नहीं पूछ पाता।
एआई मेडिकल जांच में पास, बातचीत में फेल
हार्वर्ड मेडिकल स्कूल के असिस्टेंट प्रोफेसर प्रणव राजपुरकर ने कहा, एआई मॉडल मेडिकल परीक्षा के सवालों के जवाब देने में तो अच्छे हैं, लेकिन असली डॉक्टर-मरीज की बातचीत में संघर्ष करते हैं। बातचीत में सही सवाल पूछना, बिखरी हुई जानकारी को जोड़ना और लक्षणों का सही आकलन करना बहुत जरूरी होता है, जो एआई के लिए मुश्किल साबित होता है।
बेहतर टूल्स के लिए सुझाव
इस अध्ययन ने सुझाव दिया कि एआई टूल्स को वास्तविक बातचीत के अनुसार परखा जाए। इसके लिए ऐसे टूल्स बनाने चाहिए जो खुले सवाल पूछ सकें और मरीजों के साथ बातचीत के दौरान लचीलापन दिखा सकें। ध्यान इस पर होना चाहिए कि एआई टूल्स सही जानकारी कैसे इकट्ठा करता है और प्रासंगिक सवाल कैसे पूछता है।