Confoundle · a reasoning trap

ইনটেনশন টু ট্রিট

একটি ট্রায়াল কয়েন টস করে যাতে তার দুই গ্রুপ শুরুতে একরকম হয়। তারপর বাস্তব জীবন ঘটে: মানুষ চিকিৎসা বদলায়, অপারেশনে রাজি হয় না, বা তার আগেই মারা যায়। যারা সত্যিই বরাদ্দ চিকিৎসাটি পেয়েছেন কেবল তাদের তুলনা করাই ন্যায্য মনে হয়। তা নয়, কারণ কেউ পরিকল্পনায় টিকে থাকল কি না তা নির্ভর করে সে কেমন ছিল তার উপর, আর প্রায়ই সে বেঁচে ছিল কি না তার উপর। তাদের নিঃশব্দে বাদ দিলে গ্রুপগুলো প্রগনোসিস অনুযায়ী সাজানো হয়ে যায়, যা মাপার জন্যই ট্রায়ালটি করা হচ্ছে। কয়েন যাকে যেখানে রেখেছিল সেখানেই সবাইকে গুনুন, আর তোষামুদে ফলাফলটি উবে যেতে পারে।

The rule

র‍্যান্ডমাইজেশনের পরে ঘটা কোনো কিছুর জন্য একবার মানুষকে বাদ দিলে, কয়েন যে গ্রুপ দুটি বানিয়েছিল আপনি আর সেগুলোর তুলনা করছেন না, আর এই বাদ দেওয়া সাধারণত এক পক্ষের অনুকূলে যায়।

What it looks like

যাদের ভাগে যে চিকিৎসা পড়েছিল তারা সত্যিই সেটাই পেয়েছেন, তাদের মধ্যে সার্জারি প্রাণ বাঁচিয়েছে। এটাই কি ট্রায়ালের উত্তর?হার্ট ফেলিওরে আক্রান্ত 1,212 জন, এলোমেলোভাবে ভাগ করা হয়েছে শুধু ওষুধে বা ওষুধের সঙ্গে বাইপাস সার্জারিতে। যারা বরাদ্দ অনুযায়ী চিকিৎসা পেয়েছেন কেবল তাদের বিশ্লেষণ করলে, ওষুধ গ্রুপের 43 শতাংশ মারা গেছেন, সার্জারি গ্রুপের 34 শতাংশের বিপরীতে। পার্থক্যটি পরিসংখ্যানগতভাবে সিগনিফিক্যান্ট।
কয়েন যাদের যেখানে দিয়েছিল সবাইকে গুনলে, পার্থক্যটি সিগনিফিক্যান্ট নয়।প্রথম প্যানেল থেকে অনুপস্থিত 120 জন রোগী এলোমেলো নমুনা নন। সার্জারি গ্রুপ থেকে বাদ পড়া 55 জনের মধ্যে 30 জন মারা গেছেন, এবং তাদের বেশির ভাগই অপারেশন টেবিল পর্যন্ত পৌঁছানোর আগেই মারা গেছেন। ওষুধ গ্রুপ থেকে বাদ পড়া 65 জনের মধ্যে মাত্র 15 জন মারা গেছেন, কারণ সার্জারিতে ক্রসওভার করতে হলে সেই দিন পর্যন্ত বেঁচে থাকা লাগত। ফলে সার্জারি আর্ম তার সবচেয়ে খারাপ ফলাফলগুলো ঝেড়ে ফেলল আর ওষুধ আর্ম হারাল তার সেরাগুলো, আর একজন রোগীরও পরিণতি না বদলে ব্যবধান প্রায় দ্বিগুণ হয়ে গেল:

র‍্যান্ডমাইজড তুলনার দাম ততক্ষণই, যতক্ষণ সেটি সত্যিই র‍্যান্ডম থাকে। কয়েন টস দুই গ্রুপকে একরকম করেছিল; পরে, কয়েন টসের পরে ঘটা কোনো কিছুর ভিত্তিতে কে গোনায় থাকবে তা ঠিক করলে সেটি নষ্ট হয়ে যায়। এখানে নির্ধারক বিষয়টি ছিল বেঁচে থাকা নিজেই, অর্থাৎ যে ফলাফলটি মাপা হচ্ছে সেটিই। পরে যা-ই ঘটুক, প্রত্যেককে তার বরাদ্দ গ্রুপেই গোনা, এটাই সেই বিশ্লেষণ যা কয়েন টসকে অক্ষত রাখে।

Why it works

র‍্যান্ডমাইজেশন একটি জিনিসই কিনে দেয়: দুটি গ্রুপ যারা কেবল কাকতালীয়ভাবে আলাদা, যার মধ্যে আছে সেই সব দিকও যা কেউ মাপেনি। একটি ট্রায়ালের প্রতিটি দাবি এর উপরেই দাঁড়িয়ে। মুশকিল হলো, ট্রায়াল চলে মানুষের উপরে, আর মানুষ ক্রসওভার করে, অপারেশনে রাজি হয় না, ট্যাবলেট বন্ধ করে দেয় বা চিকিৎসা শুরুর আগেই মারা যায়, আর তখন এদের সরিয়ে রেখে নিচের পরিষ্কার তুলনাটা দেখার লোভ হয়। কিন্তু কেউ প্রোটোকলে থাকল কি না, সেটি নিজেই একটি ফলাফল। ওষুধ থেকে সার্জারিতে যাওয়া রোগীদের অপারেশন পাওয়া পর্যন্ত বেঁচে থাকতে হয়। সার্জারিতে বরাদ্দ যেসব রোগী কখনও তা পান না, তারা প্রায়ই সেই মানুষ যারা অপারেশনের জন্য অতিরিক্ত অসুস্থ, বা ইতিমধ্যেই মৃত। এদের সরানো মানে প্রগনোসিস দিয়ে বাছাই করা রোগীদের সরানো, আর প্রগনোসিসই তো ট্রায়ালটি মাপছে। ইনটেনশন টু ট্রিট প্রত্যেককে সেই আর্মেই রাখে যেখানে কয়েন তাকে ফেলেছিল, যা রোগী চিকিৎসাটি আদৌ না পেলে অদ্ভুত শোনায়, আর ঠিক সেটাই মূল কথা: এটি চিকিৎসার সিদ্ধান্তের প্রভাব মাপে, বাস্তব পরিস্থিতিতে, আর একজন চিকিৎসককে সত্যিই এই সিদ্ধান্তেরই মুখোমুখি হতে হয়। এর একটি জানা মূল্য আছে। ক্রসওভার আর্মগুলোকে কাছাকাছি টেনে আনে, তাই ইনটেনশন টু ট্রিট আসল প্রভাবকে শূন্যের দিকে ছোট করে দেখানোর প্রবণতা রাখে। কোনো ওষুধ কাজ করে তা প্রমাণ করতে গেলে এটি একটি রক্ষণশীল ত্রুটি, আর কোনো ওষুধ অন্যটির চেয়ে খারাপ নয় তা প্রমাণ করতে গেলে বিপজ্জনক, আর এ কারণেই নন-ইনফিরিয়রিটি ট্রায়ালগুলো দুটি বিশ্লেষণই জানায় এবং কেবল দুটি মিললেই বিশ্বাস করা হয়।

উৎস

Velazquez EJ, Lee KL, Deja MA, et al. Coronary-artery bypass surgery in patients with left ventricular dysfunction (STICH). N Engl J Med. 2011;364(17):1607-1616, and its Supplementary Appendix, Table S5 (death from any cause at a median of 56 months, intention-to-treat and per-protocol populations).

See if it fools you

This page gives the answer away. The puzzle version shows you the same figures first and asks you to commit before the reveal.

Play this one