Confoundle · a reasoning trap

تحيز الطيف

تبدو دقة الاختبار وكأنها حقيقة عن الاختبار نفسه، مثلما أن للسيارة سرعة قصوى. وهي ليست كذلك. فالاختبار الذي يلتقط 92% من حالات العدوى لدى من يبدو مرضهم واضحاً قد لا يلتقط سوى النصف بالكاد لدى من مرضهم خفيف، لأن ما يمكن العثور عليه أقل. وكلما قيل لك إن دقة اختبار ما 95%، فالسؤال الحقيقي هو: على من قاسوا ذلك، وهل يشبهك أولئك الناس في شيء.

The rule

دقة الاختبار ليست ثابتة. فهي تتغير بحسب مدى تقدّم المرض ومدى نمطيته ومدى وضوحه لدى المرضى الخاضعين للاختبار.

What it looks like

اختبار البول هذا يكتشف 92% من حالات العدوى. أعراض مريضك غامضة. فما مدى جودته الآن؟شريط فحص البول للكشف عن العدوى البولية، جرى التحقق منه بمقارنته بزرع البول في قسم للطوارئ وعيادة تستقبل المرضى بلا موعد. فمن بين المرضى الذين كان طبيبهم يرجّح إصابتهم بالعدوى أصلاً، التقط 49 من أصل 53 مريضاً كانوا مصابين بها فعلاً. وعادةً ما تُذكر الحساسية كرقم واحد، كأنها خاصية ثابتة في الاختبار.
النصف بالكاد. والعمود الآخر ينقلب في الاتجاه المعاكس.المرضى الذين اشتبه بهم طبيبهم أصلاً كانت لديهم عداوى صارخة، من النوع الذي يرصده شريط الفحص بسهولة. أما من رُئي أن إصابتهم مستبعدة فكانت لديهم عداوى خفيفة أو مبكرة، وقد فات الاختبارَ معظمُها. انظر الآن إلى اللوحة الثانية، أي المرضى الذين لم تكن لديهم أي عدوى: هناك كان الاختبار مصيباً في 42% من الحالات في المجموعة الأولى وفي 78% منها في المجموعة الثانية. الحساسية والنوعية ليستا خاصيتين في الاختبار. إنهما خاصيتان لاختبار يلتقي بمزيج معيّن من الناس:

Why it works

الحساسية هي نسبة المرضى الحقيقيين الذين يلتقطهم الاختبار، والنوعية هي نسبة الأصحاء الذين ينفي عنهم الاختبار المرض عن حق. وتُذكر النسبتان كأنهما ملك للاختبار، مثل سعره. وهما ليستا كذلك. فالاختبار يلتقط إشارة، والإشارة أقوى في المرض المتقدم منها في المرض المبكر، لذا كلما كان المرضى الذين تختبرهم أشد مرضاً، عثر الاختبار على عدد أكبر منهم. والمنطق نفسه يسري في الاتجاه المقابل على من لا مرض لديهم: كلما كانت صحتهم أوضح، كان نفي المرض عنهم أسهل على الاختبار. لهذا يمكن لاختبار قُيّم على حالات واضحة مقابل أشخاص أصحاء واضحي الصحة أن يبدو ممتازاً ثم يخيّب الأمل في عيادة حقيقية، حيث يقع الجميع تقريباً في مكان ما بين الطرفين. ومن هنا تنشأ عادتان عمليتان. اقرأ وصف من جرى تجنيدهم قبل أن تقرأ أرقام الدقة. وكن أشد ارتياباً بدراسة اختيرت فيها مجموعة المرضى ومجموعة الأصحاء كلٌّ على حدة، بدلاً من أن تكونا مرضى متعاقبين يشكون المشكلة نفسها.

المصدر

Lachs MS, Nachamkin I, Edelstein PH, Goldman J, Feinstein AR, Schwartz JS. Spectrum bias in the evaluation of diagnostic tests: lessons from the rapid dipstick test for urinary tract infection. Ann Intern Med. 1992;117(2):135-140. See also the published correction, Ann Intern Med. 1992;117(11):975.

See if it fools you

This page gives the answer away. The puzzle version shows you the same figures first and asks you to commit before the reveal.

Play this one