[Development and validation of performance indicators of the National School Food Program management]

Cien Saude Colet. 2022 Jan;27(1):335-349. doi: 10.1590/1413-81232022271.35782020. Epub 2020 Nov 22.
[Article in Portuguese]

Abstract

The evaluation of the National School Food Program (PNAE) is a strategic action to ensure the quality of management. This study aims to develop and validate an instrument of performance indicators to assess the management of the PNAE in the national context. A psychometric study was carried out for the development and validation of performance indicators. Twelve indicators were subsequently established and evaluated by an expert panel concerning seven attributes. The Delphi technique was used for the consensus of the expert panel, and the content validity of the indicators was analyzed with the Content Validity Ratio. Nutritionists working on the implementation of the PNAE assessed the relevance of the indicators by answering an online questionnaire to construct validity and reliability. Thirteen (43.3%, 13/30) experts participated in the Delphi round 1 and nine (69.2%, 9/13) completed the Delphi round 2. A new indicator was developed after the experts' suggestions. Furthermore, 281 nutritionists participated in this study assessing the relevance of the indicators. Overall, content and construct validity were achieved for 13 indicators. All were considered relevant and had the potential to promote the assessment of PNAE operational management.

A avaliação do Programa Nacional de Alimentação Escolar (PNAE) é ação estratégica para garantir a qualidade da gestão. O objetivo deste estudo é desenvolver e validar um instrumento de indicadores de desempenho para avaliação da gestão do PNAE no contexto nacional. Trata-se de um estudo psicométrico de construção e validação de indicadores de desempenho. Foram estabelecidos 12 indicadores, posteriormente, avaliados em painel de especialistas em relação a sete atributos. Para obter consenso foi utilizada a técnica Delphi e a validade de conteúdo foi analisada com a Razão de Validade de Conteúdo. Para a validade de constructo e confiabilidade, nutricionistas que trabalham na execução do PNAE avaliaram a relevância dos indicadores respondendo um questionário online. A taxa de resposta dos especialistas na primeira rodada da técnica Delphi foi de 43,3% (13/30) e de 69,2% (9/13) na segunda rodada. Um novo indicador foi desenvolvido após a avaliação do painel de especialistas. Um total de 281 nutricionistas participaram do estudo da relevância dos indicadores. No geral, a validade de conteúdo e constructo foi alcançada para 13 indicadores. Todos os 13 indicadores se apresentaram relevantes, com potencial para promover a avaliação da gestão operacional do PNAE.

MeSH terms

  • Consensus
  • Delphi Technique
  • Humans
  • Quality Indicators, Health Care*
  • Reproducibility of Results
  • Schools*