Confoundle · a reasoning trap

स्पेक्ट्रम पूर्वाग्रह

जाँच की सटीकता जाँच के बारे में एक तथ्य जैसी लगती है, जैसे किसी कार की अधिकतम रफ़्तार होती है। पर वह ऐसी नहीं है। जो जाँच साफ़ तौर पर बीमार लोगों में 92% संक्रमण पकड़ लेती है, वह हल्के बीमार लोगों में मुश्किल से आधे ही पकड़ पाती है, क्योंकि वहाँ पकड़ने को कम है। जब भी आपसे कहा जाए कि कोई जाँच 95% सटीक है, असली सवाल यह है कि उन्होंने वह किन लोगों पर मापा, और क्या वे लोग ज़रा भी आप जैसे हैं।

The rule

किसी जाँच की सटीकता तय नहीं होती। वह इस बात के साथ बदलती है कि जिन मरीज़ों की जाँच हो रही है उनमें बीमारी कितनी बढ़ी हुई, कितनी किताबी और कितनी ज़ाहिर है।

What it looks like

पेशाब की यह जाँच 92% संक्रमण पकड़ लेती है। आपके मरीज़ के लक्षण अस्पष्ट हैं। अब यह कितनी अच्छी है?पेशाब के संक्रमण की एक डिपस्टिक जाँच, जिसे एक आपातकालीन विभाग और एक वॉक-इन क्लिनिक में पेशाब के कल्चर से मिलाकर परखा गया। जिन मरीज़ों के डॉक्टर पहले से मान रहे थे कि संक्रमण की संभावना है, उनमें जिन 53 को सचमुच संक्रमण था उनमें से 49 को इसने पकड़ लिया। संवेदनशीलता (sensitivity) आम तौर पर एक ही संख्या के रूप में बताई जाती है, मानो वह जाँच का कोई तय गुण हो।
मुश्किल से आधी। और दूसरा स्तंभ उल्टी दिशा में पलट जाता है।जिन मरीज़ों पर उनके डॉक्टर को पहले से शक था, उन्हें भड़के हुए संक्रमण थे, वैसे जिन्हें डिपस्टिक आसानी से पकड़ लेती है। जिनके बारे में संक्रमण की संभावना कम मानी गई थी, उन्हें हल्के या शुरुआती संक्रमण थे, और जाँच उनमें से ज़्यादातर को चूक गई। अब दूसरा पैनल देखिए, वे मरीज़ जिन्हें संक्रमण था ही नहीं: वहाँ जाँच पहले समूह में 42% बार सही रही और दूसरे में 78% बार। संवेदनशीलता और विशिष्टता किसी जाँच के गुण नहीं हैं। वे इस बात के गुण हैं कि जाँच किन लोगों के किस मिश्रण से मिलती है:

Why it works

संवेदनशीलता (sensitivity) उन सचमुच बीमार लोगों का हिस्सा है जिन्हें जाँच पकड़ लेती है, और विशिष्टता (specificity) उन स्वस्थ लोगों का हिस्सा है जिन्हें वह सही ढंग से नेगेटिव बता देती है। दोनों को यूँ बताया जाता है मानो वे जाँच की अपनी चीज़ हों, उसकी कीमत की तरह। पर वे ऐसी नहीं हैं। जाँच एक संकेत पकड़ती है, और यह संकेत शुरुआती बीमारी के मुकाबले बढ़ी हुई बीमारी में ज़्यादा मज़बूत होता है, इसलिए आप जितने ज़्यादा बीमार लोगों की जाँच करेंगे, उतने ही ज़्यादा वह खोज निकालेगी। जिन्हें बीमारी नहीं है, उनके लिए यही तर्क उल्टी दिशा में चलता है: वे जितने साफ़ तौर पर स्वस्थ होंगे, जाँच उतनी ही आसानी से उन्हें नेगेटिव बता देगी। यही वजह है कि साफ़ ज़ाहिर मामलों की साफ़ ज़ाहिर गैर मामलों से तुलना करके परखी गई जाँच शानदार लग सकती है और फिर किसी असली क्लिनिक में निराश कर सकती है, जहाँ लगभग हर कोई कहीं बीच में होता है। इससे दो व्यावहारिक आदतें निकलती हैं। सटीकता के आँकड़े पढ़ने से पहले यह विवरण पढ़िए कि अध्ययन में किन लोगों को शामिल किया गया था। और उस अध्ययन पर सबसे ज़्यादा शक कीजिए जिसमें बीमार और स्वस्थ समूह अलग अलग चुने गए हों, न कि एक ही शिकायत लेकर आए लगातार मरीज़ों में से बने हों।

स्रोत

Lachs MS, Nachamkin I, Edelstein PH, Goldman J, Feinstein AR, Schwartz JS. Spectrum bias in the evaluation of diagnostic tests: lessons from the rapid dipstick test for urinary tract infection. Ann Intern Med. 1992;117(2):135-140. See also the published correction, Ann Intern Med. 1992;117(11):975.

See if it fools you

This page gives the answer away. The puzzle version shows you the same figures first and asks you to commit before the reveal.

Play this one