5 · คำถามที่หนึ่ง · เทียบกับอะไร
เป็นหวัดมาสองวัน คืนที่สามอาการหนักที่สุด จนต้องลุกไปหยิบยาที่เพื่อนแนะนำมากิน สามวันต่อมาก็หายเกือบหมด
ถ้านั่นคือหวัดของคุณ ก่อนอ่านต่อ ลองตอบในใจหนึ่งข้อ แบ่งเครดิตของการหายครั้งนี้เป็นสิบส่วน ยาควรได้กี่ส่วน
ยาที่เริ่มกินตอนอาการหนักที่สุด จะดูเหมือนได้ผลเสมอ เพราะหลังจุดที่หนักที่สุด ทางที่เหลือแทบมีแต่ดีขึ้น
ในเรื่องนี้ ยาถูกหยิบในคืนที่ทนไม่ไหว และคืนที่ทนไม่ไหวที่สุดของหวัดครั้งหนึ่งก็คือยอดของมัน พ้นยอดไปแล้ว ต่อให้ไม่มีใครทำอะไรเลย ทางที่เหลือก็เป็นทางลงของอาการ ยาที่มาถึงในคืนนั้นจึงได้ยืนอยู่ตรงจุดที่อาการเริ่มดีขึ้นพอดี
คุณอีกคนที่ไม่ได้กินยา
ยาอาจช่วยจริงก็ได้ บทนี้ไม่ได้บอกว่ามันไม่ช่วย สิ่งที่บอกคือสามวันนั้นตัดสินไม่ได้ เพราะในนั้นมีสองอย่างซ้อนกันอยู่ อย่างหนึ่งคือสิ่งที่ยาทำ อีกอย่างคือสิ่งที่หวัดทำเองอยู่แล้ว และจากหวัดครั้งเดียว ไม่มีใครแยกสองอย่างนี้ออกจากกันได้
สิ่งที่ต้องใช้แยกคือคุณอีกคนหนึ่ง หวัดครั้งเดียวกัน คืนเดียวกัน แต่ไม่ได้กินยา แล้วดูว่าคนนั้นหายช้ากว่าหรือเปล่า คนคนนั้นไม่มีอยู่จริง และไม่มีวันมี
วิทยาศาสตร์ไม่เสียเวลาตามหาเขา มันสร้างของที่ใกล้ที่สุดขึ้นมาแทน เอาคนเป็นหวัดหลายคนมาแบ่งเป็นสองกลุ่มที่เหมือนกันพอ กลุ่มหนึ่งได้ยา อีกกลุ่มไม่ได้ แล้วนับว่ากลุ่มไหนหายเร็วกว่า ส่วนที่สองกลุ่มหายเท่ากันคือส่วนของเวลา ส่วนที่ต่างกันเท่านั้นคือส่วนของยา
กลุ่มที่ไม่ได้ยาเรียกว่ากลุ่มเปรียบเทียบ และมันคือคำตอบของคำถามข้อแรกในห้าข้อของเล่มนี้ เทียบกับอะไร
หกคู่บนเรือ
วันที่ 20 พฤษภาคม 1747 บนเรือรบอังกฤษชื่อ Salisbury มีผู้ป่วยโรคลักปิดลักเปิดสิบสองคนที่ James Lind คัดมาให้อาการคล้ายกันที่สุดเท่าที่หาได้ ทุกคนอยู่ห้องเดียวกัน กินอาหารเหมือนกัน แล้วถูกแบ่งเป็นหกคู่ แต่ละคู่ได้ของต่างกันอย่างเดียว คือน้ำแอปเปิลหมัก ยาน้ำผสมกรดกำมะถัน น้ำส้มสายชู น้ำทะเล ส้มสองลูกกับเลมอนหนึ่งลูกทุกวัน และยาเนื้อข้นที่ผสมจากกระเทียม เมล็ดมัสตาร์ด หัวไชเท้า และมดยอบ นานสิบสี่วัน ส้มกับเลมอนหมดลงในวันที่หก และในวันที่หกนั้น หนึ่งในคู่ที่ได้ผลไม้ก็กลับไปทำงานได้
เรื่องเล่าฉบับวีรบุรุษจบตรงนี้ว่า Lind ค้นพบว่าผลไม้ตระกูลส้มรักษาโรคนี้ได้ แล้วกองทัพเรือเพิกเฉยไปหลายสิบปี นักประวัติศาสตร์ที่กลับไปอ่านเอกสารพบว่าไม่ใช่อย่างนั้น ในงานเขียนของเขาเอง Lind ไม่ได้บอกไว้ชัดตรงไหนว่าผลไม้ตระกูลส้มรักษาโรคนี้ได้ น้ำผลไม้ที่เขาแนะนำให้เคี่ยวเก็บไว้ใช้บนเรือ เสียวิตามินที่เป็นตัวรักษาไปกับความร้อน กองทัพเรือเพิ่งแจกน้ำเลมอนกันทั่วไปตั้งแต่ปี 1795 และฉบับวีรบุรุษนั้นสืบย้อนไปได้ถึงปี 1893 เกือบร้อยห้าสิบปีหลังการทดลอง
เรื่องจริงไม่ได้ทำให้สิ่งที่เกิดบนเรือลำนั้นเล็กลง การเทียบของ Lind ชี้ไปทางส้มกับเลมอน แต่สิ่งที่มันชี้ไม่ได้บังคับให้ใครเข้าใจ แม้แต่คนที่จัดการเทียบขึ้นมาเอง และเรื่องเล่าเกี่ยวกับวิทยาศาสตร์ก็ต้องถูกตรวจแบบเดียวกับผลทดลอง อย่างที่บทที่แล้วเล่าไว้
คนวัดรู้คำตอบ
การเทียบที่จัดมาดีแค่ไหนก็ยังพังได้อีกทางหนึ่ง และบทที่หนึ่งวัดทางนั้นไว้ให้แล้ว ทหารชุดเดิม ห้องเดิม วันเดียวกัน เมื่อคนถือรู้ว่าของอยู่กล่องไหน เครื่องหาเจอสี่ครั้งจากสี่ เมื่อไม่รู้ เหลือสามครั้งจากยี่สิบ
ในการทดลองยา คนที่อยู่ในตำแหน่งของคนถือเครื่องมีสองฝ่าย คือผู้ป่วยที่ตอบว่ารู้สึกดีขึ้นไหม กับคนที่ตรวจแล้วจดว่าดีขึ้นไหม ถ้าผู้ป่วยรู้ว่าตัวเองได้ยาจริง ความหวังของเขาก็ปนเข้าไปในคำตอบ ถ้าคนตรวจรู้ ความคาดหวังของเขาก็ปนเข้าไปในตัวเลข แบบเดียวกับที่ความรู้ของคนถือปนเข้าไปในเสาอากาศ
ทางแก้มีสองชิ้น ชิ้นแรกคือยาหลอก (placebo) ยาที่หน้าตา รสชาติ และวิธีกินเหมือนยาจริงทุกอย่าง ต่างกันแค่ไม่มีตัวยา เมื่อกลุ่มเปรียบเทียบได้ยาหลอก ทุกคนก็กลืนยาเหมือนกัน และหวังได้เท่ากัน ชิ้นที่สองคือการปิดตาสองชั้น (double-blind) ทั้งผู้ป่วยและคนวัดผลไม่รู้ว่าใครอยู่กลุ่มไหน จนกว่าจะนับผลเสร็จ
เมื่อไม่มีใครรู้ว่าใครได้อะไร ความคาดหวังก็ไหลเข้าไปในผลไม่ได้ สิ่งที่เหลืออยู่ในผลคือสิ่งที่ยาทำได้จริง
สามข้อ ก่อนให้เครดิต
ทั้งหมดนี้ย่อได้เหลือสามข้อ คุณใช้มันได้กับทุกข้ออ้างที่บอกว่าอะไรทำให้อะไรดีขึ้น ทั้งยา อาหาร คอร์สเรียน และแอปในโทรศัพท์
- เทียบกับใคร ต้องมีคนที่ไม่ได้รับสิ่งนั้นในช่วงเวลาเดียวกัน ถ้าไม่มี ทุกอย่างที่ดีขึ้นอาจเป็นของเวลา
- สองกลุ่มเหมือนกันตั้งแต่ต้นไหม ถ้าแต่ละคนเลือกกลุ่มเอง เหตุที่ทำให้เขาเลือกอาจเป็นเหตุเดียวกับที่ทำให้ผลออกมาดี ทางที่ดีที่สุดคือให้ความบังเอิญเป็นคนเลือก ด้วยเหรียญหรือการจับฉลาก
- คนวัดรู้ไหมว่าใครได้อะไร ถ้ารู้ ความคาดหวังเข้าไปอยู่ในตัวเลขได้ ทั้งของคนวัดและของคนที่ถูกวัด
ลองใช้สามข้อนี้กับหวัดตอนต้นบท ข้อแรก ไม่มีใครให้เทียบ ข้อสองจึงไม่มีอะไรให้ถาม ข้อสาม คนที่ตัดสินว่าหายเพราะยาคือคนที่รู้ว่าตัวเองกินยา ตกครบทั้งสามข้อ
คำตอบของคำถามตอนต้นบทจึงเป็นแบบนี้ ส่วนของยาคือส่วนที่เหลือ หลังหักสิ่งที่จะเกิดอยู่แล้วแม้ไม่กินยาออกไป หวัดครั้งเดียวให้คุณเห็นแค่ตัวตั้งของการลบ ตัวลบไม่มีใครเห็น ตัวเลขที่ตอบไว้ ไม่ว่าศูนย์หรือสิบ วัดสิ่งเดียวกัน คือการเดาว่าถ้าไม่กินยา หวัดจะหายช้ากว่านี้แค่ไหน จากสามวันนั้น คำตอบที่ซื่อตรงคือยังไม่มีใครรู้ แม้แต่คนที่หายเอง
ถ้าย้อนไปใช้สามข้อนี้กับเรือของ Lind ข้อแรกผ่าน ข้อสองผ่านได้แค่บางส่วน คนไข้อาการคล้ายกัน แต่ไม่ได้ให้ความบังเอิญเลือกว่าใครได้อะไร ข้อสามไม่ผ่าน ไม่มีใครถูกปิดตา การเทียบบนเรือลำนั้นจึงเป็นจุดเริ่ม ยังไม่ใช่การทดสอบที่ยุติธรรม
สามข้อเดียวกันใช้กับเรื่องเงินได้ทันที คอร์สสอนขายของออนไลน์คอร์สหนึ่งโฆษณาด้วยยอดขายของผู้เรียนรุ่นก่อน ที่โตขึ้นหลังเรียนจบ
เทียบกับใคร ถ้ารุ่นนั้นเรียนจบก่อนช่วงเทศกาลลดราคา ยอดขายของร้านที่ไม่ได้เรียนอะไรเลยก็โตได้เหมือนกัน นั่นคือเวลาของโลกการค้า แบบเดียวกับที่หวัดหายเอง
สองกลุ่มเหมือนกันตั้งแต่ต้นไหม คนที่ยอมจ่ายเงินเรียนขายของ อาจมีร้านที่กำลังโตอยู่แล้ว หรือตั้งใจจะทุ่มให้ร้านมากขึ้นตั้งแต่ก่อนสมัคร เหตุที่ทำให้เขาสมัครอาจเป็นเหตุเดียวกับที่ทำให้ยอดขายโต คอร์สที่อยากรู้คำตอบจริงทำได้ เมื่อคนสมัครเกินที่นั่ง ให้จับฉลาก แล้วอีกหนึ่งปีเทียบคนที่ได้ที่นั่งกับคนที่จับไม่ได้
คนวัดรู้ไหม ในโฆษณา คนวัดคือคอร์สเอง ซึ่งรู้ว่าใครเป็นผู้เรียน และเลือกเองว่าจะวัดความสำเร็จด้วยอะไร จะโชว์ยอดขายของใคร การเทียบที่ยุติธรรมเขียนตัววัดไว้ก่อนเริ่ม อย่างการลงทะเบียนล่วงหน้าในบทที่สี่ แล้ววัดทุกคนในสองกลุ่มด้วยวิธีเดียวกัน
เก้าคาบ
คำถามสามข้อนี้สอนกันได้ไหม มีคนทดสอบไว้แล้ว ด้วยวิธีเดียวกับที่บทนี้เล่ามาทั้งบท
ในยูกันดา โรงเรียนประถม 120 แห่งถูกแบ่งเป็นสองกลุ่มด้วยการสุ่ม เด็กในกลุ่มหนึ่งได้เรียนเก้าคาบ คาบละแปดสิบนาที ว่าด้วยแนวคิดสิบสองข้อสำหรับตัดสินข้ออ้างเรื่องการรักษา อีกกลุ่มเรียนตามปกติ เด็กในการทดลองอายุสิบถึงสิบสองขวบ
คนที่ทำการทดลองนี้เปิดรายชื่อแนวคิดของพวกเขาให้ใครก็อ่านได้ ในนั้น ความเชื่อในประสบการณ์ของตัวเองอยู่ในหมวดความเชื่อผิดๆ เกี่ยวกับแหล่งที่มา ส่วนสิ่งที่ถูกสอนแทนคือการเทียบที่ยุติธรรม หวัดตอนต้นบทคือประสบการณ์แบบนั้นพอดี
หลังเรียนจบ เด็กทั้งสองกลุ่มทำข้อสอบชุดเดียวกัน ในโรงเรียนที่ได้เรียน เด็กสอบผ่าน 69% ในโรงเรียนที่ไม่ได้เรียน 27%
มีการทดลองแบบเดียวกันอีกสามชิ้นในโรงเรียนมัธยมของเคนยา รวันดา และยูกันดา นักเรียนอายุสิบสี่ถึงสิบหกปี เรียนสิบคาบ คาบละสี่สิบนาที ในทุกร้อยคน โรงเรียนที่ได้เรียนสอบผ่านมากกว่าโรงเรียนที่ไม่ได้เรียนราวสามสิบสามคน ผู้วิจัยสรุปว่านักเรียนคิดเรื่องทางเลือกด้านสุขภาพได้ดีขึ้นมาก และในประโยคเดียวกันก็เขียนว่า 42% ของนักเรียนที่ได้เรียนยังสอบไม่ผ่าน
หนึ่งปีต่อมา นักเรียนที่ได้เรียนยังสอบผ่าน 52.6% จาก 58.1% ตอนเรียนจบใหม่ๆ ความต่างจากโรงเรียนที่ไม่ได้เรียนหดลงเหลือราวยี่สิบหกคนต่อร้อย แต่ยังอยู่ ตัวเลขชุดนี้แน่นอนน้อยกว่าชุดแรก เพราะนักเรียนราวหนึ่งในสี่ตามตัวไม่ได้
นี่คือความหวังของบทนี้ และมันมาพร้อมตัวเลขทั้งสองด้าน คำถามข้อนี้สอนได้ในห้องเรียนธรรมดา ด้วยบทเรียนไม่กี่คาบ และผลของมันวัดได้ด้วยการทดสอบที่ยุติธรรม แต่มันไม่ใช่เวทมนตร์ เด็กประถมที่ได้เรียนราวสามในสิบยังสอบไม่ผ่าน นักเรียนมัธยมที่ได้เรียนสี่ในสิบยังสอบไม่ผ่าน และหนังสือหนึ่งบทก็น้อยกว่าบทเรียนเก้าคาบ
คำถามที่เด็กอายุสิบขวบเรียนได้ในเก้าคาบ มีอยู่สามคำ เทียบกับอะไร
ลองคืนนี้: เลือกข้ออ้างหนึ่งข้อที่คนในบ้านเชื่อว่าได้ผล แล้วช่วยกันออกแบบการเทียบให้มันบนกระดาษแผ่นเดียว ว่าจะเทียบกับใคร จะใช้เหรียญแบ่งกลุ่มอย่างไร และใครจะเป็นคนวัดที่ไม่รู้ว่าใครได้อะไร ข้อไหนออกแบบไม่ได้ ให้จดไว้ ข้อนั้นคือจุดที่คำว่าได้ผลในบ้านนี้ยังไม่เคยถูกตรวจ
จะรู้ว่าบทนี้ผิดเมื่อ: ผู้อ่านที่อ่านบทนี้จบ ได้รับข้ออ้างที่ไม่เคยเห็นมาก่อน แล้วยังบอกไม่ได้ว่าควรเทียบกับใคร จะแบ่งสองกลุ่มอย่างไร และใครควรเป็นคนวัด หรือเมื่อทีมอื่นทดลองสอนแบบเดียวกันในที่ใหม่ แล้วพบว่านักเรียนที่ได้เรียนตัดสินข้ออ้างเรื่องการรักษาได้ไม่ดีกว่านักเรียนที่ไม่ได้เรียน
หลักฐาน:
- การทดลองของ James Lind บนเรือ Salisbury เริ่มวันที่ 20 พฤษภาคม 1747 · ผู้ป่วยสิบสองคนที่อาการคล้ายกันที่สุด ห้องเดียวกัน อาหารเดียวกัน · หกวิธี วิธีละสองคน นานสิบสี่วัน · ส้มกับเลมอนหมดในวันที่หก และหนึ่งในคู่นั้นกลับไปทำงานได้ — พอเชื่อ (เล่าผ่านนักประวัติศาสตร์ เล่มนี้ไม่ได้เปิดบันทึกต้นฉบับ และไม่ได้พิมพ์ปริมาณยาเพราะแปลงเป็นหน่วยปัจจุบันแล้วตรวจไม่ได้) — James Lind Library — https://www.jameslindlibrary.org/articles/who-was-james-lind-and-what-exactly-did-he-achieve/
- Lind ไม่ได้บอกไว้ชัดว่าผลไม้ตระกูลส้มรักษาโรคลักปิดลักเปิด · น้ำผลไม้ที่ผ่านความร้อนเสียวิตามิน · น้ำเลมอนถูกแจกทั่วไปตั้งแต่ปี 1795 · เรื่องเล่าฉบับวีรบุรุษสืบย้อนไปได้ถึงปี 1893 — พอเชื่อ (นักประวัติศาสตร์ในแหล่งเดียวกัน) — James Lind Library — https://www.jameslindlibrary.org/articles/james-lind-and-scurvy-1747-to-1795/ และบทความในบรรทัดก่อน
- รู้คำตอบ 4 จาก 4 · ปิดตาสองชั้น 3 จาก 20 — พอเชื่อ (ดูหลักฐานของบทที่หนึ่ง) — Mochán & Ramírez-Solís, arXiv, 2013 — https://arxiv.org/abs/1301.3971
- การทดลองในโรงเรียนประถม 120 แห่งในยูกันดา แบ่งโรงเรียนด้วยการสุ่ม · เด็กอายุ 10 ถึง 12 ปี · เก้าคาบ คาบละ 80 นาที แนวคิด 12 ข้อ · สอบผ่าน 69% เทียบกับ 27% — พอเชื่อ (การทดลองขนาดใหญ่หนึ่งครั้ง) — The Lancet, 2017 — https://europepmc.org/article/MED/28539194
- การทดลองสามชิ้นในโรงเรียนมัธยมของเคนยา รวันดา และยูกันดา แบ่งโรงเรียนด้วยการสุ่ม · 244 โรงเรียน นักเรียน 11,344 คน อายุ 14 ถึง 16 ปี · สิบคาบ คาบละ 40 นาที · สอบผ่าน 58% (3,397 จาก 5,846) มากกว่าโรงเรียนที่ไม่ได้เรียน 33 คนต่อร้อย (odds ratio 5.5) · ผู้วิจัยสรุปในประโยคเดียวว่านักเรียนคิดได้ดีขึ้นมาก แต่ 42% ยังไม่ผ่าน — พอเชื่อ (สามการทดลองจากเครือข่ายวิจัยเดียวกัน) — Chesire และคณะ, Journal of Evidence-Based Medicine, 2023 — https://doi.org/10.1111/jebm.12552
- ติดตามหนึ่งปี 8,298 คน (73%) · สอบผ่าน 52.6% เทียบกับ 58.1% ตอนเรียนจบ ผู้วิจัยคิดเป็นการเรียนรู้ที่คงอยู่ 88.3% หลังปรับหักส่วนที่เดาถูก · มากกว่าโรงเรียนที่ไม่ได้เรียน 25.6 คนต่อร้อย · ความแน่นอนต่ำลงเพราะติดตามไม่ได้ 27% — พอเชื่อ — Chesire และคณะ, Trials, 2024 — https://doi.org/10.1186/s13063-024-08577-w
- รายการแนวคิดของ Informed Health Choices จัดการเชื่อประสบการณ์ของตัวเองไว้ในหมวดความเชื่อผิดๆ เกี่ยวกับแหล่งที่มา และสอนการเทียบที่ยุติธรรม — แน่น (เปิดอ่านได้จากหน้าของโครงการเอง) — https://www.informedhealthchoices.org/key-concepts/index-key-concepts/