मंजूरी के पीछे पतले सबूत
अमेरिकी खाद्य एवं औषधि प्रशासन द्वारा अनुमोदित लगभग सभी एआई-आधारित चिकित्सा उपकरणों का यह दिखाने के लिए कभी परीक्षण नहीं किया गया है कि वे रोगी के स्वास्थ्य में सुधार करते हैं। 19 अगस्त को पीएलओएस डिजिटल हेल्थ में प्रकाशित एक अध्ययन में पाया गया कि रोगी देखभाल के लिए अनुमोदित 1,357 एआई-सक्षम उपकरणों में से केवल तीन का मूल्यांकन रोगी-केंद्रित परिणामों जैसे मृत्यु दर, अस्पताल में पुनः प्रवेश या जीवन की गुणवत्ता पर किया गया था।
टोरंटो विश्वविद्यालय और एमआईटी क्रिटिकल डेटा के शोधकर्ताओं ने एफडीए डिवाइस डेटाबेस और एसीआर डेटा साइंस इंस्टीट्यूट कैटलॉग का व्यवस्थित विश्लेषण किया, जिसमें क्लिनिकलट्रायल्स.जीओवी और पबमेड की लिंक की गई खोजें शामिल थीं। उन्होंने पाया कि 1,357 अनुमोदित उपकरणों में से केवल 34, लगभग 2.5%, पंजीकृत नैदानिक परीक्षणों से जुड़े थे। केवल 12 के परिणाम पोस्ट किए गए थे, और केवल तीन ने रोगी परिणामों की सूचना दी थी।
रेडियोलॉजी सूची में सबसे आगे
रेडियोलॉजी में 1,059 अनुमोदित उपकरण शामिल हैं, और उनमें से केवल तीन के पास पंजीकृत परीक्षण था। इन उपकरणों का समर्थन करने वाले अधिकांश सबूत पूर्वव्यापी सटीकता अध्ययनों से आते हैं, जो मापते हैं कि एल्गोरिदम एक संदर्भ मानक से कितनी अच्छी तरह मेल खाता है, न कि यह कि रोगी वास्तव में बेहतर होते हैं या नहीं।
लेखकों ने यह भी पाया कि 62% अध्ययनों में छोटे, सजातीय समूहों, सीमित उपसमूह विश्लेषण और कमजोर आबादी के लगातार बहिष्कार के साथ अवलोकन संबंधी डिजाइनों का उपयोग किया गया। नकारात्मक या अनिर्णायक निष्कर्ष शायद ही कभी प्रकाशित होते हैं, जिसे शोधकर्ताओं ने एल्गोरिदमिक सफलता की कहानियों के प्रभुत्व वाले साहित्य को सुदृढ़ करने वाला बताया।
शोधकर्ता क्या चाहते हैं
'हम उम्मीद कर रहे थे कि सबूतों का आधार पतला होगा, लेकिन इतना पतला नहीं,' एमआईटी क्रिटिकल डेटा में एआई शोधकर्ता सेबेस्टियन ए. काजस ऑर्डोनेज़ ने कहा। 'एफडीए ने रोगी देखभाल में उपयोग के लिए जिन 1,357 एआई उपकरणों को मंजूरी दी है, उनमें से केवल तीन का परीक्षण किया गया है कि क्या रोगी वास्तव में लंबे या बेहतर जीवन जीते हैं। मंजूरी आपको बताती है कि एक उपकरण बाजार में पहले से मौजूद किसी चीज़ जैसा दिखता है। यह आपको यह नहीं बताता कि यह किसी की मदद करता है।'
टीम का तर्क है कि एआई उपकरणों को जीवन रक्षक कहलाने से पहले वास्तविक रोगी परिणामों पर परीक्षण किया जाना चाहिए। वे नियामक मार्गों का आह्वान करते हैं जिनके लिए नैदानिक सत्यापन की आवश्यकता होती है, न कि केवल तकनीकी सटीकता, क्योंकि हर साल सैकड़ों नए एआई उपकरण अस्पतालों में प्रवेश करते हैं।