External quality assessment of national public health laboratories in Africa, 2002-2009

Bull World Health Organ. 2012 Mar 1;90(3):191-199A. doi: 10.2471/BLT.11.091876. Epub 2012 Jan 20.

Abstract

Objective: To describe findings from an external quality assessment programme involving laboratories in Africa that routinely investigate epidemic-prone diseases.

Methods: Beginning in 2002, the Regional Office for Africa of the World Health Organization (WHO) invited national public health laboratories and related facilities in Africa to participate in the programme. Three surveys comprising specimens and questionnaires associated with bacterial enteric diseases, bacterial meningitis, plague, tuberculosis and malaria were sent annually to test participants' diagnostic proficiency. Identical surveys were sent to referee laboratories for quality control. Materials were prepared, packaged and shipped in accordance with standard protocols. Findings and reports were due within 30 days. Key methodological decisions and test results were categorized as acceptable or unacceptable on the basis of consensus feedback from referees, using established grading schemes.

Findings: Between 2002 and 2009, participation increased from 30 to 48 Member States of the WHO and from 39 to 78 laboratories. Each survey was returned by 64-93% of participants. Mean turnaround time was 25.9 days. For bacterial enteric diseases and meningitis components, bacterial identification was acceptable in 65% and 69% of challenges, respectively, but serotyping and antibiotic susceptibility testing and reporting were frequently unacceptable. Microscopy was acceptable for 73% of plague challenges. Tuberculosis microscopy was satisfactorily performed, with 87% of responses receiving acceptable scores. In the malaria component, 82% of responses received acceptable scores for species identification but only 51% of parasite quantitation scores were acceptable.

Conclusion: The external quality assessment programme consistently identified certain functional deficiencies requiring strengthening that were present in African public health microbiology laboratories.

Objectif: Décrire les résultats d'un programme d'évaluation externe de la qualité impliquant des laboratoires africains étudiant de matière systématique les maladies à potentiel épidémique.

Méthodes: Dès 2002, le Bureau régional pour l'Afrique de l'Organisation mondiale de la Santé (OMS) a invité les laboratoires de santé publique nationaux et des installations connexes en Afrique à participer au programme. Trois études comprenant des échantillons et des questionnaires associés aux maladies entériques bactériennes, à la méningite bactérienne, à la peste, à la tuberculose et au paludisme ont été envoyés chaque année pour tester la qualité du diagnostic des participants. Des études identiques ont été envoyées à des laboratoires arbitres pour le contrôle de la qualité. Les matériaux ont été préparés, emballés et expédiés conformément aux protocoles standard. Les résultats et les rapports devaient parvenir dans les 30 jours. Les principales décisions méthodologiques et les résultats des tests ont été qualifiés d’acceptables ou d’inacceptables, sur la base des commentaires consensuels des arbitres, utilisant des schémas de notation établis.

Résultats: Entre 2002 et 2009, la participation est passée de 30 à 48 États membres de l'OMS, et de 39 à 78 laboratoires. Chaque étude a été renvoyée par 64 à 93% des participants. Le délai moyen était de 25,9 jours. Pour les maladies entériques bactériennes et les composants de la méningite, l'identification bactérienne était acceptable dans 65% et 69% des tests, respectivement, mais le sérotypage et les tests de sensibilité aux antibiotiques, ainsi que les rapports, étaient souvent inacceptables. La microscopie était acceptable dans 73% des tests de peste. La microscopie de la tuberculose était effectuée de manière satisfaisante, 87% des réponses obtenant des scores acceptables. Dans la composante paludisme, 82% des réponses ont obtenu des scores acceptables pour l'identification des espèces, mais seuls 51% des scores de quantification des parasites étaient acceptables.

Conclusion: Le programme externe d'évaluation de la qualité a identifié de manière constante certaines déficiences fonctionnelles nécessitant une amélioration, dans les laboratoires de microbiologie du système de santé publique africain.

Objetivo: Describir los resultados de un programa de evaluación externa de la calidad de los laboratorios africanos que investigan habitualmente las enfermedades con tendencia a provocar epidemias.

Métodos: En el año 2002, la Oficina Regional para África de la Organización Mundial de la Salud (OMS) invitó a los laboratorios nacionales de la sanidad pública así como a los centros relacionados de África a participar en el programa. Con el fin de comprobar la capacidad de diagnóstico de los participantes, se les enviaron anualmente tres encuestas con muestras y cuestionarios relacionados con enfermedades enterobacterianas, meningitis bacteriana, peste, tuberculosis y malaria. Con el fin de realizar un control de calidad, se enviaron las mismas encuestas a los laboratorios evaluadores. Los materiales se prepararon, empaquetaron y enviaron de acuerdo con los protocolos estándar. Los resultados y las encuestas debían estar listos en un plazo de 30 días. Las principales decisiones metodológicas y los resultados de las pruebas se clasificaron como aceptables o inaceptables en base a la respuesta consensuada de los evaluadores por medio de los programas de calificación establecidos.

Resultados: La participación aumentó desde 30 hasta 48 Estados Miembros de la OMS y desde 39 hasta 78 laboratorios entre los años 2002 y 2009. Entre un 64 y un 93% de los participantes remitieron cada una de las encuestas y el plazo medio de entrega fue de 25,9 días. En los casos de enfermedades enterobacterianas y de meningitis, la identificación bacteriana fue aceptable en un 65% y un 69% de los casos, respectivamente, si bien las pruebas y los resultados de serotipado y de sensibilidad a los antibióticos fueron, con frecuencia, inaceptables. La microscopía resultó aceptable en el 73% de las pruebas de peste. La microscopía de tuberculosis se realizó de manera satisfactoria: un 87% de las respuestas obtuvo resultados aceptables. En el componente de la malaria, un 82% de las respuestas obtuvieron puntuaciones aceptables en cuanto a la identificación de la especie, pero solo el 51% de las puntuaciones para la cuantificación de parásitos resultó aceptable.

Conclusión: El programa de evaluación externa de la calidad identificó de manera sistemática algunas deficiencias funcionales que

الغرض: وصف نتائج برنامج التقييم الخارجي للجودة المشتمل على المختبرات في أفريقيا التي تقوم بالبحث بصورة روتينية في الأمراض التي قد تتحول إلى أوبئة.

الطريقة: ابتداءً من 2002، قام المكتب الإقليمي لأفريقيا التابع لمنظمة الصحة العالمية بدعوة مختبرات الصحة العامة الوطنية والمرافق ذات الصلة في أفريقيا للمشاركة في البرنامج. وتم إرسال ثلاثة مسوح تشتمل على عينات واستقصاءات متصلة بالأمراض المعوية البكتيرية والتهاب السحايا البكتيري والطاعون والسل والملاريا سنويًا لاختبار الكفاءة التشخيصية للمشاركين. وتم إرسال مسوح متطابقة لمختبرات متوافقة بغية مراقبة الجودة. وتم تحضير المواد وتعبئتها وشحنها وفقًا للبروتوكولات المعيارية الموحدة. وكانت النتائج والتقارير جاهزة خلال 30 يومًا. وتم تقسيم القرارات المنهجية الرئيسية ونتائج الاختبار إلى مقبول أو غير مقبول على أساس تعليقات الإجماع الواردة من المختبرات المتوافقة باستخدام مخططات التصنيف الموضوعة.

النتائج: في الفترة ما بين عام 2002 و2009، زادت مشاركة الدول الأعضاء في منظمة الصحة العالمية من 30 إلى 48 دولة والمختبرات من 39 إلى 78 مختبرًا. وكانت نسبة استجابة المشاركين لكل مسح ما بين 64-93 %. وكان متوسط وقت التنفيذ 25.9 يومًا. وبالنسبة للأمراض المعوية البكتيرية ومكونات التهاب السحايا، كان تحديد البكتيريا مقبولاً في ما بين 65 % و69 % من التحديات على التوالي، ولكن الأنماط المصلية واختبار التحسس للمضادات الحيوية ورفع التقارير كانت غير مقبولة على نحو متكرر. وكان الفحص المجهري مقبولاً لنسبة 73 % من التحديات الوبائية. وتم إجراء الفحص المجهري للسل على نحو مرض مع حصول 87 % من الاستجابات على درجات مقبولة. وفي مكون الملاريا، حصلت نسبة 82 % من الاستجابات على درجات مقبولة فيما يتعلق بتحديد الأنواع، إلا أن نسبة 51 % فقط من درجات التحديد الكمي للطفيليات كانت مقبولة.

الاستنتاج: حدد برنامج التقييم الخارجي للجودة على نحو متسق أوجهًا معينة من القصور الوظيفي التي تتطلب تعزيزًا وكانت موجودة في مختبرات الأحياء الدقيقة للصحة العامة الأفريقية.

目的: 描述涉及例行调查传染病倾向疾病的非洲实验室的外部质量评估计划的结果。

方法: 始于 2002 年,世界卫生组织(WHO)非洲地方办公室邀请非洲国家公共卫生实验室和相关院所参与此计划。为测试参与者的诊断熟练程度,计划每年对其发出三份调查,包含细菌肠道疾病、细菌性脑膜炎、瘟疫、肺结核和疟疾相关的样本和问卷调查。为进行质量控制,同样的调查也发送至仲裁实验室。材料根据标准协议准备、包装和发运。结果和报告在 30 天内完成。主要的方法论决策和测试结果基于仲裁者使用已建立的分级方案得出的合意反馈分为可接受和不可接受两种。

结果: 2002 年至 2009 年间,WHO 成员国参与者从 30 个增加至 48 个,实验室从 39 个增加至 78 个。每个调查返回结果的参与者比率为 64-93%。平均完成时间为 25.9 天。对于细菌肠道疾病和脑膜炎成分,细菌鉴别提问可接受比率分别为 65% 和 69%,但血清分型和抗生素敏感性测试和报告往往不可接受。73% 的瘟疫问题可使用显微镜方法。结核病使用显微镜方法执行的效果令人满意,其中 87% 的回答分数可接受。疟疾成分中,82% 的回答在种属鉴别方面得到可接受的分数,但在寄生虫定量分数方面仅有 51% 可接受。

结论: 非洲公共卫生微生物学实验室存在外部质量评估计划一直以来都有识别的、需要加强的某些功能缺陷。

Цель: Привести описание достижений, полученных в результате реализации программы внешнего контроля качества работы лабораторий общественного здравоохранения в Африке, которые регулярнопроводят исследования эпидемических заболеваний.

Методы: Начиная с 2002 г., Африканское региональное бюро Всемирной организации здравоохранения (ВОЗ) приглашало национальные лабоработии общественного здравоохранения и относящиеся к ним учреждения в Африке принять участие в данной программе. Три обзора, включающие в себя пробы и опросные листы, соответствующие бактериальным кишечным заболеваниям, бактериальному менингиту, чуме, туберкулезу и малярии, ежегодно рассылались для тестирования диагностической квалификации участников. Идентичные обзоры были направлены в экспертные лаборатории с целью контроля качества. Материалы были подготовлены, упакованы и доставлены с соблюдением стандартных требований. Срок предоставления результатов и отчетов составлял 30 дней. Ключевые методологические решения и результаты проверки были разделены на приемлемые или неприемлемые на основе согласованного мнения экспертов, использующих установленные системы оценки в баллах.

Результаты: В период между 2002 и 2009 гг. участие в данной программе было расширено с 30 до 48 страны-участницы ВОЗ и с 39 до 78 лабораторий. Каждый обзор был предоставлен 64–93% участников. Средний период проведения исследования составил 25,9 дней. В случае бактериальных кишечных заболеваний и компонентов менингита бактериальная идентификация была признана приемлемой в 65% и 69% проб соответственно, но серотипирование и тестирование чувствительности к антибиотикам, а также отчетность зачастую признавались неприемлемыми. Микроскопия была признана приемлемой в 73% проб чумы. Микроскопия туберкулеза была проведена удовлетворительно, при 87% результатов, получивших приемлемые оценки в баллах. В случае малярийного компонента 82% результатов получили приемлемые оценки по идентификации видов, но только 51% баллов количественной оценки присутствия паразитов были признаны приемлемыми.

Вывод: Программа внешней оценки качества последовательно идентифицировала имевшие место в африканских национальных лабораториях общественного здравоохранения определенные функциональные недостатки, требующие устранения.

Publication types

  • Research Support, Non-U.S. Gov't
  • Research Support, U.S. Gov't, Non-P.H.S.

MeSH terms

  • Africa
  • Disease Outbreaks / prevention & control*
  • Health Care Surveys
  • Health Services
  • Humans
  • Laboratories / standards*
  • Laboratories / statistics & numerical data
  • Malaria / diagnosis
  • Meningitis, Bacterial / diagnosis
  • Plague / diagnosis
  • Population Surveillance / methods*
  • Public Health / standards*
  • Public Health / statistics & numerical data
  • Quality Assurance, Health Care / standards*
  • Quality Assurance, Health Care / statistics & numerical data
  • Quality Control
  • Tuberculosis, Pulmonary / diagnosis