Does research through Structured Operational Research and Training (SORT IT) courses impact policy and practice?

Public Health Action. 2016 Mar 21;6(1):44-9. doi: 10.5588/pha.15.0062. Epub 2016 Jan 4.

Abstract

Setting: Structured Operational Research and Training Initiative (SORT IT) courses are well known for their output, with nearly 90% of participants completing the course and publishing in scientific journals.

Objective: We assessed the impact of research papers on policy and practice that resulted from six SORT IT courses initiated between July 2012 and March 2013.

Design: This was a cross-sectional study involving e-mail-based, self-administered questionnaires and telephone/skype/in-person responses from first and/or senior co-authors of course papers. A descriptive content analysis of the responses was performed and categorised into themes.

Results: Of 72 participants, 63 (88%) completed the course. Course output included 81 submitted papers, of which 76 (94%) were published. Of the 81 papers assessed, 45 (55%) contributed to a change in policy and/or practice: 29 contributed to government policy/practice change (20 at national, 4 at subnational and 5 at hospital level), 11 to non-government organisational policy change and 5 to reinforcing existing policy. The changes ranged from modifications of monitoring and evaluation tools, to redrafting of national guidelines, to scaling up existing policies.

Conclusion: More than half of the SORT IT course papers contributed to a change in policy and/or practice. Future assessments should include more robust and independent verification of the reported change(s) with all stakeholders.

Contexte : Les cours de l'Initiative de Recherche et de Formation Structurées Opérationnelles (SORT IT) sont bien connus pour leurs bons résultats : près de 90% des participants terminent le cours et publient dans des revues scientifiques.Objectif : Evaluer l'impact sur la politique/les pratiques de ces articles de recherche qui ont été le résultat de six cours SORT IT initiés entre juillet 2012 et mars 2013.Schéma : Une étude transversale impliquant des questionnaires auto-administrés envoyés par courriel et des réponses par téléphone/skype/en personne des auteurs principaux et/ou des co-auteurs des articles liés au cours. Une analyse descriptive du contenu des réponses a été réalisée et catégorisée par thèmes.Résultats : Sur 72 participants, 63 (88%) ont terminé le cours. Les résultats du cours ont inclus 81 articles soumis, dont 76 (94%) ont été publiés. Sur les 81 articles publiés évalués, 45 (55%) ont contribué à une modification de la politique et/ou des pratiques : 29 articles ont contribué à une modification de la politique/des pratiques par le gouvernement (20 au niveau national, 4 au niveau sous-national et 5 au niveau hospitalier), 11 à des modifications de politique d'organisations non gouvernementales et cinq à un renforcement de la politique existante. Ces changements allaient de modifications des outils de suivi et d'évaluation à une nouvelle rédaction des directives nationales et à une accélération des politiques existantes.Conclusion : Plus de la moitié des articles du cours SORT IT ont contribué à une modification de la politique et/ou des pratiques. Les évaluations futures devraient inclure des vérifications plus solides et indépendantes des modifications rapportées avec toutes les parties concernées afin d'améliorer leur rigueur et leur richesse.

Marco de referencia: Los cursos de capacitación de la Iniciativa de Capacitación Estructurada en Investigación Operativa (SORT IT, por su sigla en inglés) se conocen ampliamente gracias a sus resultados, pues cerca de 90% de los participantes completa el curso y publica artículos en revistas científicas.Objetivo: Evaluar el impacto sobre las políticas y las prácticas de los artículos de investigación producidos en seis cursos SORT IT iniciados de julio del 2012 a marzo del 2013.Método: Se llevó a cabo un estudio transversal mediante cuestionarios autoadministrados por correo electrónico y respuestas directas mediante comunicaciones telefónicas y por Skype, que se dirigieron al primer autor y a los coautores experimentados de los artículos publicados después de los cursos; se realizó un análisis de contenido de tipo descriptivo de las respuestas con el fin de derivar los temas.Resultados: De los 72 participantes, 63 completaron el curso (88%). Se produjeron 81 artículos que se presentaron para publicación y 76 fueron aceptados (94%). De los 81 artículos evaluados, 45 contribuyeron a modificar las políticas o las prácticas (55%) de la siguiente manera: 29 contribuyeron a un cambio en las políticas o prácticas gubernamentales (20 a escala nacional, 4 a escala subnacional y 5 a nivel hospitalario), 11 favorecieron cambios de políticas en organizaciones no gubernamentales y cinco fortalecieron políticas existentes. Las modificaciones abarcaron aspectos variados desde las herramientas de supervisión y evaluación, hasta la reformulación de directrices nacionales destinadas a la ampliación de escala de las políticas existentes.Conclusión: Más de la mitad de los artículos elaborados en los cursos SORT IT contribuyó a una modificación en las políticas o las prácticas. Las evaluaciones futuras deberán comportar mecanismos de verificación de los cambios notificados que sean más sólidos e independientes, con participación de todos los interesados directos a fin de reforzar su rigor y enriquecer su contenido.

Keywords: Médecins Sans Frontières; The Union; WHO/TDR; operational research capacity building; policy and practice.