كيف نعمل - المنشور الثالث: تحليلاتنا تتضمن قرارات اجتهادية
هذا المنشور هو الثالث في سلسلة متعددة الأجزاء تغطي كيفية عملنا في GiveWell وما نموله. نأمل أن تتيح لكم هذه المنشورات فهمًا أفضل لأبحاثنا والعمليات التي نتبعها لاتخاذ القرارات. روابط المقالات الأخرى:
- كيف نعمل - المنشور الأول: فعالية التكلفة هي العامل الأكثر أهمية في توصياتنا بوجه عام
- كيف نعمل - المنشور الثاني: نركز على فرص محددة ولا نكتفي بالتدخلات العامة
هدفنا هو التوصية بتمويل البرامج التي نعتقد أنها تحقق أكبر تأثير مقابل كل دولار من أموال التبرعات. لا توجد خوارزمية بسيطة للإجابة على هذا السؤال. فالإجابة تنطوي بالضرورة على اتخاذ قرارات اجتهادية. ناقشت مشاركتنا الأولى في هذه السلسلة أهمية تحليلات فعالية التكلفة والعوامل العديدة التي نأخذها في الاعتبار؛ في هذه التدوينة سنشارك معكم:
- كيف نتخذ قرارات ذاتية في ظل نقص المعلومات.
- بعض الأمثلة على القرارات الاجتهادية التي توضح نهجنا:
- الجمع بين البيانات والحدس: تقدير تأثير معالجة المياه بالكلور على معدل الوفيات.
- تقييم النتائج المتباينة: مقارنة علاج اعوجاج القدم ببرامج أخرى منقذة للحياة.
- توقع القرارات المحتملة للجهات الفاعلة الأخرى: التنبؤ بتأثير المساعدة التقنية للكشف عن مرض الزهري وعلاجه.
اتخاذ القرارات استنادًا إلى أدلة غير كاملة
يعتمد عملنا بدرجة كبيرة على الأدلة، لكن الأدلة المتاحة لا تجيب على أي سؤال بيقين تام.
المؤلفات الأكاديمية وقيودها
نحن لا نأخذ نتائج أي دراسة على ظاهرها1. وبدلًا من ذلك، كثيرًا ما نجري تعديلات على طول الطريق للتوصل إلى تقدير نهائي. وخلال هذه العملية، قد نأخذ في الاعتبار ما يلي:
- القيود المنهجية للدراسات المتاحة.
- احتمالية التحيز في النشر أو النتائج الزائفة.
- ما إذا كانت نتائج الدراسة تمثل تأثير البرنامج الذي نفكر في تمويله، الأمر الذي يتطلب النظر في الاختلافات المحتملة في السياقات وفي البرامج التي يُجرى تنفيذها.
- مدى معقولية النتائج عند النظر في المعلومات الأخرى المرتبطة بها، بما في ذلك إمكانية وجود آلية معروفة قد يحقق البرنامج تأثيرًا معينًا من خلالها.
- آراء المستشارين الخبراء.
- عوامل أخرى غير مذكورة هنا.
بعض الأسئلة لا يمكن تناولها بسهولة من خلال الدراسات، ولكنها لا تزال مهمة لتقييم تأثير البرنامج. وتشمل هذه مواضيع مثل:
- هل سيدعم ممول آخر هذا البرنامج إذا لم نموله نحن؟
- هل سينتقل هذا البرنامج بحيث يصبح من مهام الحكومة؟
- ما مدى احتمالية أن توفر الأبحاث الجديدة معلومات تغير وجهات نظرنا بعد عامين أو ثلاثة من الآن؟
- ما مدى سوء تجربة الإصابة بالمرض (أ) مقارنة بتجربة الإصابة بالمرض (ب)؟
النظر في وجهات نظر متعددة
قد يختلف بعض المانحين وغيرهم من الخبراء على نحو معقول مع تقديراتنا الإجمالية؛ وبينما نحاول التوصل إلى أفضل إجابة ممكنة، إلا أن تحليلاتنا تنطوي بالضرورة على أحكام ذاتية.
عند تحديد قيم المؤشرات المهمة، فإننا لا نعتمد فقط على رأي باحث واحد في GiveWell. بالإضافة إلى مراجعة المؤلفات العلمية، فإن وجهات نظرنا تتشكل أيضًا من خلال:
- المحادثات مع الخبراء. أثناء البحث في منحة ما، عادةً ما نتحدث مع الخبراء للاستفادة من وجهات نظرهم. انظر هذه الصفحة للحصول على العديد من الأمثلة.
- مراجعة الأقران الداخلية. عادةً ما نُخضِع عملنا لمراجعة الأقران. في البحث النموذجي لأي منحة، قد يُسنَد إلى اثنين أو ثلاثة من باحثي GiveWell الذين لم يعملوا على البحث مهمة مراجعة العمل بعناية ومشاركة تعليقاتهم حول نقاط القوة والضعف في الحجة المقدمة لصالح المنحة. قد نعقد أيضًا ورش عمل لمناقشة الأسئلة الرئيسية. انظر مراجعتنا لبرنامج منظمة New Incentives للاطلاع على بعض الأمثلة على آراء الزملاء.
- مراجعة الخبراء الخارجيين. في بعض الأحيان، نكلف مستشارين خارجيين بمراجعة عملنا أو دراسات علمية معينة. على سبيل المثال، بحث ديفيد رودمان في أسئلة صعبة ومعقدة مثل تأثير التخلص من الديدان في مرحلة الطفولة على معدلات الاستهلاك في وقت لاحق من الحياة؛ انظر مشاركاته هنا وهنا. في الآونة الأخيرة، طلبنا من أحد خبراء الحديد وفقر الدم إعداد تقرير لإطلاعنا على المخاوف التي أثارتها إحدى المشاركات في مسابقتنا «Change Our Mind».
دراسات الحالة
الجمع بين البيانات والحدس: تقدير تأثير معالجة المياه بالكلور على معدل الوفيات
خفض معدل الوفيات هو المحرك الأكبر لفعالية تكلفة التدخلات المتعلقة بجودة المياه في نماذجنا، لكن تقدير عدد الأرواح التي يمكن أن تنقذها المياه النظيفة ليس بالمهمة السهلة. لعدة سنوات، لم نوصِ بتقديم تمويل كبير لبرامج جودة المياه؛ نظرًا لأن أفضل تقديراتنا وضعت فعالية هذه البرامج من حيث التكلفة عند مستوى أقل مقارنة بمؤسساتنا الخيرية الكبرى. لكن ثمة نتائج جديدة حصلنا عليها عام 2020 قادتنا إلى تحديث وجهة نظرنا: جمع التحليل التلوي الذي أجراه مايكل كريمر وفريقه نتائج الوفيات من الدراسات التي تمثل عدة أنواع من التدخلات المتعلقة بجودة المياه في البيئات التي تحتوي على مياه غير آمنة، مما وفر دليلًا أقوى على تأثير جودة المياه على معدل الوفيات بالإضافة إلى زيادة تقديراتنا السابقة لهذا التأثير بمعدل نقطة.
في حين أن هذا التحليل التلوي كان بمثابة تحديث كبير، تشير تقديراتنا إلى أن تأثير جودة المياه على معدل الوفيات أقل مما تشير إليه نتائج الدراسة. في ظاهر الأمر، قدر التحليل التلوي انخفاض الوفيات الناجمة عن جميع الأسباب بين الأطفال الصغار بحوالي 30٪ - وهذا ليس أعلى مما يمكن تفسيره بانخفاض حالات الإسهال فحسب، ولكنه أعلى أيضًا مما كنا نتوقع عندما نأخذ الآثار غير المباشرة في الاعتبار (بمعنى أن الوفيات التي تحدث بسبب الأمراض المنقولة بالمياه قد تجعل الناس أكثر عرضة لأسباب أخرى للوفاة)2.
لكي نصل إلى تقديرنا لحجم التأثير، أجرينا التحليل التلوي الخاص بنا، وكلفنا خبيرين خارجيين (انظر هنا وهنا) لمراجعة التحليل التلوي الأصلي بحيث نأخذ وجهتي نظرهما في الاعتبار. جمعنا البيانات من التجارب العشوائية المضبوطة الخمسة في تحليل كريمر التي تركز على معالجة المياه بالكلور (على عكس التدخلات الأخرى المتعلقة بجودة المياه) ولها فترات متابعة لا تقل عن عام واحد (لاستبعاد الدراسات التي نراها أكثر عرضة لتحيز النشر)أ. كما استبعدنا تجربة عشوائية واحدة تلبي معاييرنا الأخرى لأننا رأينا أن نتائجها مرتفعة على نحو يصعب تصديقه لدرجة جعلتنا نشك في أنها تمثل التأثير الحقيقي لتدخلات معالجة المياه بالكلور (المزيد في الهامش)3. من غير المعتاد استبعاد الدراسات لهذا السبب عند إجراء تحليل تلوي، لكننا أخذنا هذا القرار لأننا نعتقد أنه يمنحنا تقديرًا كليًّا من المرجح أن يمثل حجم التأثير الحقيقي.
تشير تقديراتنا إلى أن معالجة المياه بالكلور تقلل الوفيات الناجمة عن جميع الأسباب بين الأطفال دون سن الخامسة بنحو 12٪، مقارنة بنسبة 30٪ في التحليل التلوي الذي أجراه كريمر حول تدخلات جودة المياهب. (ثم عدلنا هذا الرقم البالغ 12٪ ليتناسب مع السياق المحدد الذي يُنفَّذ فيه البرنامج، كما هو موضح في منشورنا السابق على المدونة).
وقد أثار النهج الذي اتبعناه في حساب هذا التأثير تعليقات مدروسة من آخرين، مثل فيتولد فيتشيك، وماثيو رومر، وبول رومر بريزنت. نعتقد أن الباحثين العقلانيين قد يتخذون خيارات مختلفة حول كيفية تفسير الأبحاث والتوصل إلى تقدير شامل، وما زلنا نفكر في طرق أخرى. وفي الوقت ذاته، نشعر حاليًا بالرضا عن النهج الذي اخترناه للتوصل إلى نتيجة معقولة.
تقييم النتائج المتباينة: مقارنة علاج اعوجاج القدم ببرامج أخرى منقذة للحياة
في أوائل عام 2023، قدمنا منحة لدعم منظمة MiracleFeet المعنية بعلاج اعوجاج القدم، وهو مرض وراثي مؤلم يحد من حركة المصاب. لمقارنة فعالية هذا البرنامج من حيث التكلفة مع البرامج الأخرى التي نمولها، نحتاج إلى تقدير مدى أهمية النجاح في علاج حالة اعوجاج القدم لدى أحد الأطفال مقارنة بمدى أهمية تجنب وفاة الطفل.
هذا السؤال - ما مدى سوء حالة اعوجاج القدم؟ - ليست له إجابة عددية «صحيحة». تعد دراسة العبء العالمي للأمراض (GBD) التي أجراها معهد القياسات الصحية والتقييم مصدرنا المعتاد لتقديرات مدى سوء الأمراض والإعاقات المختلفة، ولكنها لا تتضمن تقديرًا محددًا لاعوجاج القدم. لذلك، تحدثنا مع أحد خبراء الإعاقة وراجعنا المؤلفات العلمية ذات الصلة للحصول على فكرة أفضل حول تأثير اعوجاج القدم على الشخص المصاب. أردنا أن نفهم مدى الألم الذي يسببه اعوجاج القدم، ومدى تأثيره على قدرة الشخص على عيش حياته، وكيف تؤثر الوصمة المجتمعية المرتبطة باعوجاج القدم على الرفاه والفرص.
في النهاية، اخترنا استخدام قياس دراسة العبء العالمي للأمراض «مستوى تشوه 2 مع وجود ألم وإعاقة حركية متوسطة نتيجة لخلل وراثي في الأطراف» كقيمة تقريبية لتقييم اعوجاج القدم الثنائي (أي اعوجاج القدم الذي يؤثر على كلا الساقين). وفقًا لفهمنا، فهذا القياس الذي توفره دراسة العبء العالمي للأمراض يأخذ بعين الاعتبار الإعاقات الجسدية المؤلمة والمسببة للحكة، حيث يواجه الشخص صعوبة إلى حد ما في الحركة، وقد يحدق فيه الآخرون أو يعلقون. واخترناه بناءً على فهمنا لتجارب الأشخاص الذين لم يتلقوا علاجًا لاعوجاج القدم، بناءً على المؤلفات التي قرأناها ومحادثاتنا مع أحد خبراء الإعاقة ومنظمة MiracleFeet. نستخدم 75٪ من هذه القيمة كقيمة تقريبية لتقييم اعوجاج القدم الأحادي (أي اعوجاج القدم الذي يؤثر على ساق واحدة فقط)ج. بالنظر إلى هذه القيم، فإن منع المعاناة التي قد تحدث على مدار حياة شخص ما بسبب اعوجاج القدم يساوي ربع قيمة إنقاذ طفل صغير من الموت4. لكننا ما زلنا غير متيقنين تمامًا حيال القيمة الحقيقية - أفضل تقدير لدينا هو أن ثمة احتمالية بنسبة 50٪ أن تتراوح القيمة «الحقيقية» بين ثمن وثلث قيمة إنقاذ طفل من الموت5.
تشير هذه التقديرات إلى أن MiracleFeet، التي تُقدِّر تكلفة الوقاية من حالة اعوجاج القدم بحوالي 1200 دولار أمريكيد، هي منظمة فعالة من حيث التكلفة، شأنها في ذلك شأن أفضل جمعياتنا الخيرية. ولهذا السبب قررنا تمويلها، ونحن مهتمون بمعرفة المزيد.
توقع القرارات المحتملة للجهات الفاعلة الأخرى: التنبؤ بتأثير المساعدة التقنية للكشف عن مرض الزهري وعلاجه
أوصينا بتقديم منحة إلى منظمة Evidence Action للكشف عن مرض الزهري وعلاجه أثناء الحمل، مما يقلل من النتائج الضارة التي تشمل وفيات الأطفال حديثي الولادة وحالات الإملاص. وبدلًا من تقديم الفحوصات والمضادات الحيوية بصورة مباشرة، تعمل Evidence Action على دعم حكومتي الكاميرون وزامبيا في توفير البرنامج. والهدف هو دعم وزارتي الصحة في الانتقال من استخدام الفحوصات السريعة لفيروس نقص المناعة البشرية إلى استخدام الفحوصات السريعة المزدوجة لفيروس نقص المناعة البشرية والزهري للحوامل وتوفير البنسلين للأشخاص الذين ثبتت إصابتهم بمرض الزهري.
فيما يتعلق بالجهود الموجهة نحو السياسات، يتعين علينا وضع تنبؤات والتفكير في سيناريوهات مضادة: ما الذي سيحدث بدعم مؤسسة Evidence Action، وما الذي سيحدث بدونه؟ عند تقييم فعالية التكلفة المتوقعة لهذه المنحة، يوجد سؤالان رئيسيان:
- هل تعمل زامبيا أو الكاميرون على توسيع نطاق الفحوصات والعلاج لكل من فيروس نقص المناعة البشرية والزهري حتى في غياب الدعم من Evidence Action؟
- هل ينتقل البرنامج بنجاح إلى الحكومة بحيث يستمر في نهاية المطاف دون استمرار دعم Evidence Action؟
بالتركيز على زامبيا فقط، قدرنا احتمالية بنسبة 50٪ أن يُعتمد الفحص المزدوج من قبل الحكومة في غياب دعم Evidence Action، وقدرنا أيضًا أنه لو كان اعتُمد من قبل الحكومة، لكان ذلك سيحدث بتأخير عام تقريبًا مقارنة بوجود دعم من Evidence Action. وفي حالة توفر دعم Evidence Action، نقدر أن ثمة احتمالية بنسبة 80٪ لنجاح الاعتماد، واحتمالية بنسبة 70٪ لانتقال البرنامج بنجاح إلى الحكومة. ويأتي جزء كبير من التأثير المتوقع من زيادة معدلات العلاج؛ بالنسبة إلى زامبيا، نتوقع أن يحصل 70٪ من الأشخاص الذين ثبتت إصابتهم على العلاج بدعم من Evidence Action، مقارنة بـ 45٪ (وهو ما نعتقد أنه معدل العلاج الحالي تقريبًا) في غياب الدعم.
هذه التقديرات ذاتية، وتنبع من رؤيتنا لعوامل مثل المستوى الظاهر من اهتمام الحكومة بتنفيذ الفحص المزدوج، وبساطة التدخل، وحقيقة أنه يستفيد من البنية التحتية المخصصة حاليًا لفحص فيروس نقص المناعة البشرية.
وضعنا توقعات حول نتائج هذه المنحة هنا وسنكون قادرين على العودة إليها ومقارنة توقعاتنا بما يحدث بالفعل، رغم أننا بالطبع لن نتمكن من معرفة ما كان سيحدث في حال لم نمول البرنامج.
خاتمة
نسعى إلى وضع تقديرات تمثل معتقداتنا الحقيقية. لا تستند تحليلاتنا لفعالية التكلفة إلى الأدلة فحسب، بل تشمل أيضًا بعض التعديلات والاجتهادات التي لا تظهر بالكامل من النتائج العلمية وحدها. (في حال وجود ثغرات في قاعدة الأدلة، فإننا نمول أبحاثًا إضافية كلما أمكن - سنتحدث عن ذلك بالتفصيل في منشور لاحق).
في النهاية، نتخذ قرارات بناءً على أفضل تقديراتنا حتى وإن كانت بعض القيم ذاتية، وحتى لو لم نكن متأكدين من صحتها. حيث يتطلب عملنا اتخاذ إجراءات رغم عدم اكتمال المعلومات. في النهاية، نحن نقدم توصيات تعكس قناعاتنا الحقيقية حول المجالات التي نرى أن التمويل يحقق فيها أكبر فائدة، ونشارك في عملية صنع القرار بشفافية حتى يتسنى للآخرين تقييم استنتاجاتنا.
انظر هذا القسم من تقريرنا حول هذا التدخل لمزيد من التفاصيل.
انظر الهامش رقم 2 هنا.
انظر هذا القسم من تحليل فعالية التكلفة الذي أجريناه.
انظر صفحة المنحة للحصول على البيانات.