Scales for assessing therapeutic adherence and competence in dialectical behaviour therapy for PTSD: development and analysis of psychometric properties

Eur J Psychotraumatol. 2022 Apr 1;13(1):2055293. doi: 10.1080/20008198.2022.2055293. eCollection 2022.

Abstract

Background: The assessment of therapeutic adherence and competence is essential to understand mechanisms that contribute to treatment outcome. Nevertheless, their assessment is often neglected in psychotherapy research.

Aims/objective: To develop an adherence and a treatment-specific competence rating scale for Dialectical Behaviour Therapy for Posttraumatic Stress Disorder (DBT-PTSD), and to examine their psychometric properties. Global cognitive behavioural therapeutic competence and disorder-specific therapeutic competence were assessed using already existing scales to confirm their psychometric properties in our sample of patients with PTSD and emotion regulation difficulties.

Method: Two rating scales were developed using an inductive procedure. 155 videotaped therapy sessions from a multicenter randomised controlled trial were rated by trained raters using these scales, 40 randomly chosen videotapes involving eleven therapists and fourteen patients were doubly rated by two raters.

Results: Both the adherence scale (Patient-level ICC = .98; αs = .65; α p = .75) and the treatment-specific competence scale (Patient-level ICC = .98; αs = .78; α p = .82) for DBT-PTSD showed excellent interrater - and good reliability on the patient level. Content validity, including relevance and appropriateness of all items, was confirmed by experts in DBT-PTSD for the new treatment-specific competence scale.

Conclusion: Our results indicate that both scales are reliable instruments. They will be useful to examine possible effects of adherence and treatment-specific competence on DBT-PTSD treatment outcome.

Antecedentes: La evaluación de la adherencia y la competencia terapéuticas es esencial para comprender las posibles intervenciones y los mecanismos que contribuyen al resultado del tratamiento. Sin embargo, su evaluación es a menudo descuidada en la investigación en psicoterapia. Objetivos: El objetivo del presente estudio fue desarrollar una escala de valoración de la adherencia y de la competencia específica del tratamiento para la Terapia Dialéctica Conductual para el Trastorno de Estrés Postraumático (DBT-PTSD, en sus siglas en inglés), y examinar sus propiedades psicométricas. Además, se evaluó la competencia terapéutica cognitivo-conductual global y la competencia terapéutica específica del trastorno utilizando escalas ya existentes para confirmar sus propiedades psicométricas en nuestra muestra de pacientes con TEPT y dificultades de regulación de las emociones. Método: Se desarrollaron dos escalas de calificación utilizando un procedimiento inductivo. 155 sesiones de terapia grabadas en video de un ensayo controlado aleatorizado multicéntrico fueron calificadas por evaluadores entrenados utilizando estas escalas, 40 videos elegidos al azar que involucraron a once terapeutas y catorce pacientes fueron doblemente evaluados por dos evaluadores. Resultados: Tanto la escala de adherencia (CCI a nivel de paciente = 0,98; αs = 0,65; α p = 0,75) como la escala de competencia específica para el tratamiento (CCI a nivel de paciente = 0,98; αs = 0,78; α p = 0,82) para la DBT-PTSD mostraron una excelente fiabilidad entre evaluadores y buena a nivel de paciente. La validez del contenido, incluyendo la relevancia y adecuación de todos los ítems, fue confirmada por expertos en DBT-PTSD para la nueva escala de competencia específica para el tratamiento. Conclusión: Nuestros resultados indican que ambas escalas son instrumentos fiables. Serán útiles para examinar los posibles efectos de la adherencia y de la competencia específica para el tratamiento en el resultado del tratamiento DBT-PTSD.

背景: 治疗依从性和能力的评估对于了解有助于治疗结果的可能干预措施和机制至关重要。然而, 在心理治疗研究中经常忽视对它们的评估。目的/目标: 本研究旨在为创伤后应激障碍的辩证行为疗法(DBT-PTSD)制定依从性和治疗特异性能力评定量表, 并考查其心理测量特性。此外, 使用现有的量表评估了全球认知行为治疗能力和疾病特异性治疗能力, 以确保其在我们 PTSD 和情绪调节困难患者样本中的心理测量特性。方法: 使用归纳程序开发了两个 评分量表。经培训的评分员使用这些量表对来自一个多中心随机对照试验的 155 个录像带进行评分, 两名评分员对涉及 11 名治疗师和 14 名患者的40 个随机选择的录像带进行评分。结果: 依从性量表(患者水平 ICC = .98; αs = .65; α p = .75)和治疗特异性能力量表 (患者 水平 ICC = .98; αs = .78; α p = .82) 对于 DBT-PTSD, 在患者水平上表现出优秀的测试者间和良好的可靠性。对新的治疗特异性能力量表的内容有效性, 包括所有条目的相关性和适当性, 通过了DBT-PTSD 专家的确认。结论: 我们的结果表明, 这两种量表都是可靠的工具。它们将有助于考查依从性和治疗特异性能力对 DBT-PTSD 治疗结果的可能影响。.

Keywords: DBT; DBT-PTSD; PTSD; Posttraumatic stress disorder; dialectic behavioural therapy; therapeutic adherence; treatment integrity; • We report on a new rating scale to assess therapistś adherence to a new psychological treatment for victims of childhood abuse who suffer from posttraumatic stress disorder and problems in emotion regulation, and to assess therapistś competence in administering this treatment.

Publication types

  • Multicenter Study
  • Randomized Controlled Trial
  • Research Support, Non-U.S. Gov't

MeSH terms

  • Dialectical Behavior Therapy*
  • Humans
  • Psychometrics
  • Reproducibility of Results
  • Stress Disorders, Post-Traumatic* / therapy
  • Treatment Adherence and Compliance

Grants and funding

The RELEASE study was funded by the German Federal Ministry of Education and Research [grant number 01KR1303A].