Published October 25, 2023 | Version v1
Publication Metadata-only

How to improve research capacity strengthening efforts: learning from the monitoring and evaluation of four research consortia in Africa

Creators

  • 1. Africa Health Research Institute
  • 2. University of KwaZulu-Natal
  • 3. Liverpool School of Tropical Medicine
  • 4. University of Liverpool
  • 5. Kenya Medical Research Institute
  • 6. Strathmore University
  • 7. Makerere University
  • 8. Swiss Centre for Scientific Research
  • 9. Catholic Relief Services
  • 10. Uganda Virus Research Institute
  • 11. London School of Hygiene & Tropical Medicine
  • 12. University of Oxford
  • 13. Pwani University
  • 14. Ragon Institute of MGH, MIT and Harvard
  • 15. University College London

Description

Recent efforts to shift the control and leadership of health research on African issues to Africa have led to increased investments for scientific research capacity strengthening (RCS) on the continent and a greater demand for accountability, value for money and demonstration of return on investment. There is limited literature on monitoring and evaluation (M&E) of RCS systems and there is a clear need to further explore whether the M&E frameworks and approaches that are currently used are fit for purpose. The M&E approaches taken by four African RCS consortia funded under the Developing Excellence in Leadership, Training and Science in Africa (DELTAS) I initiative were assessed using several methods, including a framework comparison of the M&E approaches, semi-structured interviews and facilitated discussion sessions. The findings revealed a wide range in the number of indicators used in the M&E plans of individual consortium, which were uniformly quantitative and at the output and outcome levels. Consortia revealed that additional information could have been captured to better evaluate the success of activities and measure the ripple effects of their efforts. While it is beneficial for RCS consortia to develop and implement their own M&E plans, this could be strengthened by routine engagement with funders/programme managers to further align efforts. It is also important for M&E plans to consider qualitative data capture for assessment of RCS efforts. Efforts could be further enhanced by supporting platforms for cross-consortia sharing, particularly when trying to assess more complex effects. Consortia should make sure that processes for developmental evaluation, and capturing and using the associated learning, are in place. Sharing the learning associated with M&E of RCS efforts is vital to improve future efforts. Investing and improving this aspect of RCS will help ensure tracking of progress and impact of future efforts, and ensure accountability and the return on investment. The findings are also likely applicable well beyond health research.

⚠️ This is an automatic machine translation with an accuracy of 90-95%

Translated Description (Arabic)

أدت الجهود الأخيرة لتحويل مراقبة وقيادة البحوث الصحية حول القضايا الأفريقية إلى أفريقيا إلى زيادة الاستثمارات في تعزيز قدرات البحث العلمي في القارة وزيادة الطلب على المساءلة والقيمة مقابل المال وإظهار العائد على الاستثمار. هناك أدبيات محدودة حول الرصد والتقييم (M&E) لأنظمة تحليل المخاطر الإقليمية وهناك حاجة واضحة لمزيد من الاستكشاف حول ما إذا كانت أطر ونهج الرصد والتقييم المستخدمة حاليًا مناسبة للغرض. تم تقييم مناهج الرصد والتقييم التي اتخذتها أربعة اتحادات أفريقية لخدمات الاتصالات الإقليمية الممولة في إطار مبادرة تطوير التميز في القيادة والتدريب والعلوم في أفريقيا (DELTAS) باستخدام عدة طرق، بما في ذلك مقارنة إطارية بين مناهج الرصد والتقييم والمقابلات شبه المنظمة وجلسات المناقشة الميسرة. كشفت النتائج عن مجموعة واسعة من المؤشرات المستخدمة في خطط الرصد والتقييم الخاصة بالاتحاد الفردي، والتي كانت كمية بشكل موحد وعلى مستويات المخرجات والنتائج. كشفت الاتحادات أنه كان من الممكن الحصول على معلومات إضافية لتقييم نجاح الأنشطة بشكل أفضل وقياس الآثار المتتالية لجهودها. في حين أنه من المفيد لاتحادات خدمات الإغاثة الملكية وضع وتنفيذ خطط الرصد والتقييم الخاصة بها، إلا أنه يمكن تعزيز ذلك من خلال المشاركة الروتينية مع الممولين/مديري البرامج لزيادة مواءمة الجهود. من المهم أيضًا بالنسبة لخطط المراقبة والتقييم النظر في التقاط البيانات النوعية لتقييم جهود RCS. يمكن زيادة تعزيز الجهود من خلال دعم منصات المشاركة بين الاتحادات، لا سيما عند محاولة تقييم الآثار الأكثر تعقيدًا. يجب على الاتحادات التأكد من وجود عمليات التقييم التنموي، والتقاط واستخدام التعلم المرتبط بها. تعد مشاركة التعلم المرتبط برصد وتقييم جهود RCS أمرًا حيويًا لتحسين الجهود المستقبلية. سيساعد استثمار هذا الجانب وتحسينه في ضمان تتبع التقدم المحرز وتأثير الجهود المستقبلية، وضمان المساءلة وعائد الاستثمار. من المحتمل أيضًا أن تكون النتائج قابلة للتطبيق إلى ما هو أبعد من الأبحاث الصحية.

Translated Description (French)

Les efforts récents pour transférer le contrôle et le leadership de la recherche en santé sur les questions africaines vers l'Afrique ont conduit à une augmentation des investissements pour le renforcement des capacités de recherche scientifique (RCS) sur le continent et à une plus grande demande de responsabilité, d'optimisation des ressources et de démonstration du retour sur investissement. Il existe peu de littérature sur le suivi et l'évaluation (S&E) des systèmes RCS et il est clairement nécessaire d'explorer davantage si les cadres et les approches de S&E actuellement utilisés sont adaptés à l'objectif. Les approches de S&E adoptées par quatre consortiums RCS africains financés dans le cadre de l'initiative Développement de l'excellence en leadership, formation et science en Afrique (DELTAS) I ont été évaluées à l'aide de plusieurs méthodes, notamment une comparaison du cadre des approches de S&E, des entretiens semi-structurés et des séances de discussion animées. Les résultats ont révélé un large éventail d'indicateurs utilisés dans les plans de S&E de chaque consortium, qui étaient uniformément quantitatifs et aux niveaux des extrants et des résultats. Les consortiums ont révélé que des informations supplémentaires auraient pu être recueillies pour mieux évaluer le succès des activités et mesurer les effets d'entraînement de leurs efforts. Bien qu'il soit bénéfique pour les consortiums RCS d'élaborer et de mettre en œuvre leurs propres plans de S&E, cela pourrait être renforcé par un engagement de routine avec les bailleurs de fonds/gestionnaires de programme afin d'aligner davantage les efforts. Il est également important que les plans de S&E envisagent la saisie de données qualitatives pour l'évaluation des efforts de RCS. Les efforts pourraient être encore renforcés en soutenant les plateformes de partage entre consortiums, en particulier lorsque l'on tente d'évaluer des effets plus complexes. Les consortiums doivent s'assurer que des processus d'évaluation du développement, de capture et d'utilisation de l'apprentissage associé, sont en place. Le partage de l'apprentissage associé au S&E des efforts de RCS est essentiel pour améliorer les efforts futurs. Investir et améliorer cet aspect du RCS aidera à assurer le suivi des progrès et de l'impact des efforts futurs, et à assurer la responsabilité et le retour sur investissement. Les résultats sont également probablement applicables bien au-delà de la recherche en santé.

Translated Description (Spanish)

Los recientes esfuerzos para trasladar el control y el liderazgo de la investigación en salud sobre cuestiones africanas a África han llevado a un aumento de las inversiones para el fortalecimiento de la capacidad de investigación científica (RCS) en el continente y a una mayor demanda de rendición de cuentas, relación calidad-precio y demostración del retorno de la inversión. Existe una literatura limitada sobre el monitoreo y la evaluación (M&E) de los sistemas RCS y existe una clara necesidad de explorar más a fondo si los marcos y enfoques de M&E que se utilizan actualmente son adecuados para el propósito. Los enfoques de SyE adoptados por cuatro consorcios africanos de SCR financiados en el marco de la iniciativa Developing Excellence in Leadership, Training and Science in Africa (DELTAS) I se evaluaron utilizando varios métodos, incluida una comparación marco de los enfoques de SyE, entrevistas semiestructuradas y sesiones de debate facilitadas. Los hallazgos revelaron una amplia gama en el número de indicadores utilizados en los planes de SyE de cada consorcio, que eran uniformemente cuantitativos y a nivel de productos y resultados. Los consorcios revelaron que se podría haber capturado información adicional para evaluar mejor el éxito de las actividades y medir los efectos dominantes de sus esfuerzos. Si bien es beneficioso para los consorcios de RCS desarrollar e implementar sus propios planes de SyE, esto podría fortalecerse mediante el compromiso rutinario con los financiadores/administradores de programas para alinear aún más los esfuerzos. También es importante que los planes de SyE consideren la captura de datos cualitativos para la evaluación de los esfuerzos de RCS. Los esfuerzos podrían mejorarse aún más mediante el apoyo a plataformas para el intercambio de consorcios cruzados, particularmente cuando se trata de evaluar efectos más complejos. Los consorcios deben asegurarse de que existan procesos para la evaluación del desarrollo y la captura y el uso del aprendizaje asociado. Compartir el aprendizaje asociado con el SyE de los esfuerzos de RCS es vital para mejorar los esfuerzos futuros. Invertir y mejorar este aspecto de RCS ayudará a garantizar el seguimiento del progreso y el impacto de los esfuerzos futuros, y garantizará la rendición de cuentas y el retorno de la inversión. Es probable que los hallazgos también se apliquen mucho más allá de la investigación en salud.

Additional details

Additional titles

Translated title (Arabic)
كيفية تحسين جهود تعزيز القدرات البحثية: التعلم من رصد وتقييم أربعة اتحادات بحثية في أفريقيا
Translated title (French)
Comment améliorer les efforts de renforcement des capacités de recherche : apprendre du suivi et de l'évaluation de quatre consortiums de recherche en Afrique
Translated title (Spanish)
Cómo mejorar los esfuerzos de fortalecimiento de la capacidad de investigación: aprender del seguimiento y la evaluación de cuatro consorcios de investigación en África

Identifiers

Other
https://openalex.org/W4387950032
DOI
10.1186/s12961-023-01056-9

Is supplement to
https://openalex.org/W4281729441 (Other)
https://openalex.org/W2170164482 (Other)
https://openalex.org/W2147364604 (Other)
https://openalex.org/W1990017571 (Other)
https://openalex.org/W2097470286 (Other)
https://openalex.org/W2534785893 (Other)
https://openalex.org/W2083921201 (Other)
https://openalex.org/W2789098662 (Other)
https://openalex.org/W2339282677 (Other)
https://openalex.org/W2919948111 (Other)

GreSIS Basics Section

Is Global South Knowledge
Yes

References

  • https://openalex.org/W1979261553
  • https://openalex.org/W2131033084
  • https://openalex.org/W2146346454
  • https://openalex.org/W2160159763
  • https://openalex.org/W2168028038
  • https://openalex.org/W2196756900
  • https://openalex.org/W2483197041
  • https://openalex.org/W2580626871
  • https://openalex.org/W2751868632
  • https://openalex.org/W2771470428
  • https://openalex.org/W2937818617
  • https://openalex.org/W3012793049
  • https://openalex.org/W3032998480
  • https://openalex.org/W3045306894
  • https://openalex.org/W3108497610
  • https://openalex.org/W3140988515
  • https://openalex.org/W3182171332
  • https://openalex.org/W4243716548
  • https://openalex.org/W4250510382
  • https://openalex.org/W4293798055
  • https://openalex.org/W4300864126