Validation of community health workers' assessment of neonatal illness in rural Bangladesh

Bull World Health Organ. 2009 Jan;87(1):12-9. doi: 10.2471/blt.07.050666.

Abstract

Objective: To estimate the validity (sensitivity, specificity, and positive and negative predictive values) of a clinical algorithm as used by community health workers (CHWs) to detect and classify neonatal illness during routine household visits in rural Bangladesh.

Methods: CHWs evaluated breastfeeding and symptoms and signs of illness in 395 neonates selected randomly from neonatal illness surveillance during household visits on postnatal days 0, 2, 5 and 8. Neonates classified with very severe disease (VSD) were referred to a community-based hospital. Within 12 hours of CHW assessments, physicians independently evaluated all neonates seen in a given day by one CHW, randomly chosen from among 36 project CHWs. Physicians recorded symptoms and signs of illness, classified the illness, and determined whether the newborn needed referral-level care at the hospital. Physicians' identification and classification were used as the gold standard in determining the validity of CHWs' identification of symptoms and signs of illness and its classification.

Findings: CHWs' classification of VSD showed a sensitivity of 73%, a specificity of 98%, a positive predictive value of 57% and a negative predictive value of 99%. A maternal report of any feeding problem as ascertained by physician questioning was significantly associated (P < 0.001) with 'not sucking at all' and 'not attached at all' or 'not well attached' as determined clinically by CHWs during feeding assessment.

Conclusion: CHWs identified with high validity the neonates with severe illness needing referral-level care. Home-based illness recognition and management, including referral of neonates with severe illness by CHWs, is a promising strategy for improving neonatal health and survival in low-resource developing country settings.

Objectif: Estimer la validité (c’est-à-dire la sensibilité, la spécificité et les valeurs prédictives positive et négative) d’un algorithme clinique tel qu’utilisé par les agents de santé communautaires pour détecter et catégoriser les maladies néonatales lors des visites systématiques dans les foyers, dans le Bangladesh rural.

Méthodes: Les agents de santé ont évalué l’allaitement et les symptômes et signes de maladie chez 395 nouveau-nés sélectionnés au hasard, dans le cadre de la surveillance des maladies néonatales, lors des visites à domicile effectuées le jour de la naissance et les 2e, 5 et 8e jours après la naissance. Les nouveau-nés classés comme atteints d’une maladie très grave ont été orientés vers un hôpital communautaire. Dans les 12 jours suivant les évaluations par les agents de santé, des médecins ont évalué indépendamment tous les nouveau-nés vus au cours d’une journée par un agent de santé sélectionné au hasard parmi 36 agents de santé participant au projet. Les médecins ont enregistré les symptômes et les signes de maladie, catégorisé l’éventuelle maladie et déterminé si le nouveau-né nécessitait des soins spécialisés dans un hôpital. L’identification et la classification effectuées par les médecins ont servi de référence pour évaluer la validité de l’identification des symptômes et des signes de maladie et de la catégorisation des cas par les agents de santé.

Résultats: L’identification par les agents de santé des maladies très graves présentait une sensibilité de 73%, une spécificité de 98%, une valeur prédictive positive de 57% et une valeur prédictive négative de 99%. Le signalement par la mère d’un problème d’allaitement lors de l’interrogatoire mené par le médecin était associé de manière significative (p < 0,001) aux observations cliniques « absence totale de succion » et « ne prend pas le sein » ou « prend mal le sein », faites par les agents de santé pendant l’évaluation de l’allaitement.

Conclusion: L’identification par les agents de santé des nouveau-nés atteints d’une maladie grave et nécessitant des soins spécialisés présentait un haut niveau de validité. La reconnaissance à domicile des maladies et leur prise en charge, y compris l’aiguillage des nouveau-nés gravement malades vers des soins spécialisés, par des agents de santé représente une stratégie prometteuse pour l’amélioration de la santé et de la survie des nouveau-nés dans les pays en développement disposant de peu de ressources.

Objetivo: Estimar la validez (sensibilidad, especificidad y valores predictivos positivo y negativo) de un algoritmo clínico en la forma en que lo usaban agentes de salud comunitarios (ASC) para detectar y clasificar las enfermedades neonatales en las visitas domiciliarias sistemáticas en zonas rurales de Bangladesh.

Métodos: Los ASC evaluaron las prácticas de lactancia materna y los signos y síntomas de enfermedad en 395 recién nacidos seleccionados aleatoriamente mediante los sistemas de vigilancia de la morbilidad neonatal con ocasión de visitas domiciliarias realizadas a los 0, 2, 5 y 8 días del nacimiento. Los recién nacidos clasificados con enfermedades muy graves (EMG) fueron derivados a un hospital comunitario. En el término de las 12 horas siguientes a esos exámenes realizados por los ASC, los médicos exploraron de forma independiente a todos los recién nacidos examinados en un determinado día por un ASC, elegido al azar entre los 36 ASC participantes en el proyecto. Los médicos registraban los signos y síntomas de la enfermedad, clasificaban la enfermedad y determinaban si el recién nacido necesitaba atención de referencia en el hospital. La identificación y la clasificación que realizaron los médicos se utilizaron como criterio de referencia para determinar la validez de la identificación de los signos y síntomas y la clasificación de la enfermedad realizadas por los ASC.

Resultados: La clasificación de las EMG realizada por los ASC mostró una sensibilidad del 73%, una especificidad del 98%, un valor predictivo positivo del 57% y un valor predictivo negativo del 99%. Las referencias de las madres a cualquier problema de lactancia en sus respuestas a los médicos se asociaron de forma significativa (p < 0,001) a la observación por parte de los ASC, en su evaluación de ese aspecto, de que el lactante no succionaba en absoluto o bien no prendía el pezón o lo prendía mal.

Conclusión: Los ASC identificaron con una alta fiabilidad a los recién nacidos con enfermedades graves que necesitaban atención de referencia. El diagnóstico y manejo domiciliario de las enfermedades, incluida la derivación de los recién nacidos con enfermedades graves por los ASC, constituye una estrategia prometedora para mejorar la salud y la supervivencia de los recién nacidos en los entornos con pocos recursos de los países en desarrollo.

الەدف: تقييم صحة الخوارزمية السريرية (الإكلينيكية) كما يستخدمەا العاملون الصحيون المحليون عند زياراتەم الروتينية للأسر في أرياف بنغلاديش (من حيث الحساسية، والنوعية، والقيم الإرشادية الموجبة والسالبة).

الطريقة: قام العاملون الصحيون المحليون بتقييم الإرضاع من الثدي وأعراض وعلامات المرض لدى 395 وليداً اختيروا عشوائياً عن طريق ترصُّد الحالات خلال زيارات تمت للأسر في يوم الولادة، وبعدەا بيومين، ثم بخمسة أيام، ثم بثمانية أيام. وأحيل الولدان الذين صُنفت حالاتەم بالإصابة بمرض وخيم جداً إلى مستشفى محلي. وقام الأطباء، في غضون 12 ساعة من تقييم العاملين الصحيين المحليين، بإجراء تقييم مستقل لجميع الولدان الذين فحصوا من قِبَل أحد العاملين الصحيين، في يوم معين، يختار عشوائيا من بين الـ 36 عاملاً صحياً المشاركين في ەذا المشروع. وسجل الأطباء الأعراض والعلامات المرضية، وصنفوا المرض، وحددوا ما إذا كان الوليد يحتاج إلى الإحالة لتلقي مستوى رعاية أعلى في المستشفى. واستُخدم تحديد وتصنيف الأطباء كمعيار مرجعي لتقرير مدى صحة الأعراض والعلامات المرضية المحددة والمصنفة من قِبَل العاملين الصحيين المحليين.

الموجودات: جاءت معدلات التصنيفات التي حددەا العاملون الصحيون للأمراض الوخيمة جداً لدى الولدان بنسبة 73% من حيث الحساسية، و98% من حيث النوعية، و57% للقيمة الإرشادية الموجبة، و99% للقيمة الإرشادية السالبة. وبالنسبة لإفادات الأمەات في ما يختص بمشاكل الإرضاع على النحو الذي تأكد من خلال أسئلة الأطباء، فقد جاءت مرتبطة ارتباطاً يعتد بە إحصائياً (نسبة الاحتمال أقل من 0.001) بعبارات “لا يمـصّ مطلقـاً”،أو “لا يلتصق بالثدي مطلقاً” أو “لا يلتصق بالثدي جيداً”، وذلك على النحو الذي تقرر سريرياً (إكلينيكياً) من قِبَل العاملين الصحيين عند تقييمەم للإرضاع.

الاستنتاج: أمكن للعاملين الصحيين المحليين التعرُّف بدرجة عالية من الصحة على الولدان المصابين بأمراض وخيمة تستوجب الإحالة لتلقِّى الرعاية في مرافق الإحالة. وإن تعرُّف العاملين الصحيين المحليين على الأمراض وتدبيرەا في منازل المرضى، بما في ذلك إحالة الولدان المصابين بأمراض وخيمة، يُعَدُّ استراتيجية واعدة لتحسين صحة الولدان وبقائەم على قيد الحياة في مختلف مناطق البلدان النامية الشحيحة الموارد.

Publication types

  • Research Support, Non-U.S. Gov't
  • Research Support, U.S. Gov't, Non-P.H.S.
  • Validation Study

MeSH terms

  • Adult
  • Bangladesh
  • Community Health Workers*
  • Female
  • Humans
  • Infant
  • Infant, Newborn
  • Infant, Newborn, Diseases / diagnosis
  • Neonatal Nursing*
  • Neonatal Screening / standards*
  • Population Surveillance
  • Prospective Studies
  • Referral and Consultation
  • Rural Population
  • Young Adult