Validating existing clinical cut-points for the parent-reported Strengths and Difficulties Questionnaire in a large sample of Canadian children and youth

Health Promot Chronic Dis Prev Can. 2023 Sep;43(9):409-420. doi: 10.24095/hpcdp.43.9.03.
[Article in English, French]

Abstract

Introduction: The Strengths and Difficulties Questionnaire (SDQ), for assessing behavioural and emotional difficulties, has been used internationally as a screening measure for mental health problems. Our objective was to validate the existing (British) SDQ cut-points in a sample of Canadian children and youth, and develop new Canadian SDQ cut-points if needed.

Methods: This study includes data from children and youth aged 6 to 17 years from the Canadian Health Measures Survey (n = 3435) and outpatient records from the Children's Hospital of Eastern Ontario (n = 1075). The parent-reported SDQ data were collected. We adjusted the existing SDQ cut-points using a distributional and receiver-operating characteristic (ROC) curve approach. We subsequently calculated the sensitivity, specificity and diagnostic odds ratio of the existing and new SDQ clinical cut-points to determine whether the new cut-points had better clinical utility, using both analytic approaches.

Results: Our data show differences in the screening effectiveness between the existing British and the Canadian-specific clinical cut-points. Specificity is maximized using the Canadian distributional cut-points, improving the likelihood of identifying true negative results. The total SDQ score met the threshold for clinical utility (diagnostic odds ratio > 20) using both the existing and new cut-points; however, the individual scales did not reach clinical utility threshold using either cut-points.

Conclusions: Future Canadian SDQ research should consider the new cut-points derived from our study population and the existing British cut-points to allow for historical and international comparisons.

Introduction: Le Questionnaire sur les points forts et les points faibles (Strengths and Difficulties Questionnaire, ou SDQ), qui permet d’évaluer les difficultés comportementales et émotionnelles, est un outil de dépistage des problèmes de santé mentale utilisé dans plusieurs pays. Notre objectif était de valider les seuils (cut-points) actuels, britanniques, du SDQ au sein d’un échantillon d’enfants et de jeunes canadiens et, au besoin, de fixer de nouveaux seuils canadiens pour le SDQ.

Méthodologie: Cette étude est fondée sur les données d’enfants et de jeunes de 6 à 17 ans provenant de l’Enquête canadienne sur les mesures de la santé (n = 3 435) et de dossiers de consultations externes du Centre hospitalier pour enfants de l’est de l’Ontario (n = 1 075). Nous avons recueilli les données issues du SDQ rempli par les parents. Nous avons ajusté les seuils actuels du SDQ à l’aide d’une approche fondée sur la distribution et d’une approche par courbe ROC (Receiver Operating Characteristic, ou courbe caractéristique de la performance d’un test). Nous avons ensuite calculé, à l’aide de ces deux méthodes analytiques, la sensibilité, la spécificité et le rapport de cotes diagnostique des seuils cliniques actuels et des nouveaux seuils cliniques du SDQ afin de déterminer si de nouveaux seuils offriraient une meilleure utilité clinique.

Résultats: Les données recueillies révèlent des différences entre les seuils cliniques britanniques et les seuils cliniques canadiens en matière d’efficacité de dépistage. L’utilisation des valeurs canadiennes obtenues à l’aide de la technique fondée sur la distribution a permis de maximiser la spécificité, c’est-à-dire qu’elle a permis d’améliorer la probabilité de détecter les vrais négatifs. Le score total au SDQ atteignait le seuil d’utilité clinique (rapport de cotes diagnostiques > 20) tant avec les seuils actuels qu’avec les nouveaux seuils, mais les échelles individuelles n’atteignaient pas ce seuil d’utilité clinique, et ce, avec aucun des deux seuils.

Conclusion: Les chercheurs canadiens travaillant avec le SDQ devraient tenir compte à la fois des nouveaux seuils calculés avec notre population à l’étude et des seuils britanniques afin de permettre les comparaisons au fil du temps et entre pays.

Keywords: child and adolescent; conduct problems; emotional symptoms; hyperactivity; mental health; peer problems; prosocial behaviour; validation.

Plain language summary

This study validated the existing British SDQ cut-points in a large sample of Canadian children and youth and developed Canadian-specific cut-points using a distributional approach and receiver operating characteristic (ROC) curves. The Canadian-specific clinical cutpoints (90th percentile) using the distributional approach demonstrated higher specificity than the ROC curve derived cut-points. For this reason, the distributional cut-points have better population-based utility. Both the existing British and the Canadian-specific clinical cutpoints for the total difficulties score met the threshold for clinical utility to predict mental health diagnosis.

MeSH terms

  • Adolescent
  • Child
  • Health Surveys
  • Hospitals, Pediatric*
  • Humans
  • Ontario
  • Parents*
  • ROC Curve