Validation of a non-laboratorial questionnaire to identify Metabolic Syndrome among a population in central Mexico

Rev Panam Salud Publica. 2019 Jan 25:43:e9. doi: 10.26633/RPSP.2019.9. eCollection 2019.

Abstract

Objective: To determine the reliability of a non-laboratorial questionnaire, the Encuesta de Identificación de Sujetos Metabólicamente Comprometidos en Fase-I (ESF-I) for identifying Metabolic Syndrome among a population in central Mexico.

Methods: Clinical and biochemical parameters were collected for 232 participants from 1 June 2012 - 31 August 2013. Three definitions of Metabolic Syndrome (Harmonizing, National Cholesterol Education Program Expert Panel and Adult Treatment Panel III [ATPIII], and International Diabetes Federation [IDF]) were used to allocate subjects to either the normal or Metabolic Syndrome positive (MetS+) group. The predictability of the questionnaire was determined by the Area-Under-the-Receiver-Operating Characteristic curve (AUC). Youden's index was calculated and the highest score was considered the optimal cutoff value. Cohen´s kappa (κ) was calculated to determine the level of agreement between the ESF-I questionnaire (max score: 15 based on 15 items) and Metabolic Syndrome.

Results: From 53.8% - 60.7% of the participants were determined to be MetS+. The average questionnaire score was significantly higher in the MetS+ group for each definition (4.0 vs. 8.0, P < 0.05). The ESF-I questionnaire was predictive for the Harmonizing definition (AUC = 0.841, 95%CI: 0.790 - 0.892), the ATPIII definition (AUC = 0.827, 95%CI: 0.774 - 0.880), and the IDF definition (AUC = 0.836, 95%CI: 0.785 - 0.887). A cutoff value of 7 was determined for each definition; therefore, the cohort was re-categorized based on questionnaire results. There was a strong agreement between the ESF-I questionnaire and MetS (Harmonizing: accuracy = 77.6%, κ = 0.554; ATPIII: accuracy = 74.1%, κ = 0.489; IDF: accuracy = 74.6%, κ = 0.495, P < 0.001).

Conclusion: The ESF-I questionnaire can identify MetS+ patients, and therefore, lead to earlier diagnoses, reduced number of consultations, and lower costs with easier application.

Objetivo: Determinar la fiabilidad de un cuestionario en el que no se recurre al diagnóstico de laboratorio, la Encuesta de Identificación de Sujetos Metabólicamente Comprometidos en Fase-I (ESF-I), para detectar el síndrome metabólico en una población de la región central de México.

Métodos: Se recogieron parámetros clínicos y bioquímicos de 232 participantes desde el 1 de junio del 2012 al 31 de agosto del 2013. Se usaron tres definiciones de síndrome metabólico (la unificadora, la del Grupo de Expertos en el Tratamiento de Adultos [ATPIII] del Programa Nacional de Educación sobre el Colesterol y la de la Federación Internacional de la Diabetes [FID]) para asignar los participantes al grupo normal o al grupo de síndrome metabólico positivo (SMet+). Se determinó la previsibilidad del cuestionario con el área bajo la curva de eficacia diagnóstica (curva ROC). Se calculó el índice de Youden y la puntuación más alta se consideró el valor de corte óptimo. El coeficiente (k) de Cohen se calculó para determinar el grade de acuerdo entre el cuestionario ESF-I (máxima puntuación: 15 sobre 15 ítems) y el síndrome metabólico.

Resultados: Del 53,8 % al 60,7 % de los participantes se asignaron al grupo SMet+. La puntuación promedio del cuestionario fue significativamente mayor en el grupo de SMet+ para cada definición (4,0 vs. 8.0, P < 0.05). El cuestionario ESF-I fue predictivo para la definición unificadora (AUC = 0,841, 95 % CI: 0,790 – 0,892), la definición ATPIII (AUC = 0,827, 95 % CI: 0,774 – 0,880) y la definición de la FID (AUC = 0,836, 95 % CI: 0,785 – 0,887). Se determinó un el valor de corte óptimo de 7 para cada definición; por lo tanto, se reclasificó la cohorte según los resultados del cuestionario. Hubo una gran coincidencia entre el cuestionario ESF-I y SMet (unificadora: exactitud = 77,6 %, κ = 0,554; ATPIII: exactitud = 74,1 %, κ = 0,489; FID: exactitud = 74,6%, κ = 0,495, P < 0,001).

Conclusiones: El cuestionario ESF-I puede detectar pacientes con SMet+ y, por lo tanto, conducir a diagnósticos más tempranos, reducir la cantidad de consultas y reducir los costos con una aplicación más fácil.

Objetivo: Determinar a confiabilidade de um instrumento de coleta de dados não laboratoriais, Encuesta de Identificación de Sujetos Metabólicamente Comprometidos en Fase-I (pesquisa de identificação de indivíduos com comprometimento metabólico em fase I, ESF-I) para identificar síndrome metabólica em uma população da região central do México.

Métodos: Foram coletados parâmetros clínicos e bioquímicos de 232 participantes da pesquisa entre 1° de junho de 2012 e 31 de agosto de 2013. O estudo se baseou em três definições de síndrome metabólica (definição harmonizada do Painel de Especialistas do Programa Nacional de Educação em Colesterol dos Estados Unidos [NCEP]; Painel para Tratamento de Adultos III [ATPIII]; e Federação Internacional de Diabetes [FIL]) para alocar os participantes em um grupo normal ou em um grupo com síndrome metabólica (SM). A previsibilidade do instrumento foi determinada pela área sob a curva ROC (característica de operação do receptor) (AUC). O índice de Youden foi calculado e o escore mais alto foi considerado o valor ideal de corte. O coeficiente kappa de Cohen (κ) foi calculado para determinar o grau de concordância entre o questionário ESF-1 (pontuação máxima de 15 em 15 itens) e a síndrome metabólica.

Resultados: Foi determinado que 53,8% a 60,7% dos participantes apresentavam SM. A pontuação média no instrumento foi significativamente maior no grupo SM com cada uma das definições usadas (4,0 vs. 8,0, P<0,05). O questionário ESF-I foi preditivo com a definição harmonizada (AUC 0,841; IC 95% 0,790–0,892), com a definição do ATPIII (AUC 0,827; IC 95% 0,774–0,880) e com a definição da FIL (AUC 0,836; IC 95% 0,785–0,887). Um valor de corte de 7 foi determinado para cada definição e a coorte foi recategorizada de acordo com os resultados do instrumento. Foi observada uma forte concordância entre o questionário ESF-I e o grupo SM (harmonizada: precisão = 77,6%, κ = 0,554; ATPIII: precisão = 74,1%, κ = 0,489; FIL: precisão = 74,6%, κ = 0,495, P<0,001).

Conclusão: O questionário ESF-I é capaz de identificar pacientes com síndrome metabólica, possibilitando o diagnóstico precoce, um número menor de consultas e um custo menor com uma aplicação mais simples.

Keywords: Metabolic syndrome, diagnosis; Mexico; noncommunicable diseases; surveys and questionnaires.

Grants and funding

This study was supported by grants from “Programa para el Desarrollo Profesional Docente” to CA-160 FACMED (ETR, MEGM, RPF) and “Vicerrectorıa de Investigación, Benemerita Universidad Autónoma de Puebla” to TORE-SAL18-G (ETR), GOMM-SAL18-I (MEGM), RUVG-SAL18-I (GRV) and PEFR-SAL18-G (RPF). The funders had no role in the study design, data collection or analysis, decision to publish, or preparation of the manuscript.