A mixed-method investigation of patient monitoring and enhanced feedback in routine practice: Barriers and facilitators

Psychother Res. 2015;25(6):633-46. doi: 10.1080/10503307.2015.1051163.

Abstract

Objective: To investigate the barriers and facilitators of an effective implementation of an outcome monitoring and feedback system in a UK National Health Service psychological therapy service.

Method: An outcome monitoring system was introduced in two services. Enhanced feedback was given to therapists after session 4. Qualitative and quantitative methods were used, including questionnaires for therapists and patients. Thematic analysis was carried out on written and verbal feedback from therapists. Analysis of patient outcomes for 202 episodes of therapy was compared with benchmark data of 136 episodes of therapy for which feedback was not given to therapists.

Results: Themes influencing the feasibility and acceptability of the feedback system were the extent to which therapists integrated the measures and feedback into the therapy, availability of administrative support, information technology, and complexity of the service. There were low levels of therapist actions resulting from the feedback, including discussing the feedback in supervision and with patients.

Conclusions: The findings support the feasibility and acceptability of setting up a routine system in a complex service, but a number of challenges and barriers have to be overcome and therapist differences are apparent. More research on implementation and effectiveness is needed in diverse clinical settings.

Obiettivo: studiare gli ostacoli e i facilitatori di una efficace attuazione di un monitoraggio degli esiti e di un sistema di feedback in un servizio di terapia psicologica del Servizio Sanitario Nazionale del Regno Unito. Metodo: è stato introdotto un sistema di monitoraggio dell'esito in due servizi. E’ stato fornito un maggior feedback ai terapeuti dopo la seduta 4. E’ stato usato un metodo qualitativo e quantitativo, tra cui questionari per i terapeuti e pazienti. E’ stata effettuata un'analisi tematica sui feedback scritti e verbali dei terapeuti. L'analisi degli esiti dei pazienti a partire da 202 episodi della terapia sono stati confrontati con i risultati standard di 136 episodi di terapia di soggetti per i quali non erano stati dati feedback al terapeuta. Risultati: temi che influenzano la fattibilità e l'accettabilità del sistema di feedback sono stati la misura in cui i terapeuti integravano le misure e feedback nella terapia, la disponibilità di supporto amministrativo, informazioni tecniche e la complessità del servizio. Ci sono stati bassi livelli di azioni del terapeuta derivanti dal feedback, tra cui discutere il feedback in supervisione e con i pazienti. Conclusioni: I risultati confermano la fattibilità e l'accettabilità della costruzione di un sistema di routine in un servizio complesso, ma una serie di sfide e ostacoli devono essere superati e le differenze tra terapeuti sono evidenti. E’ necessaria una maggiore ricerca sull'attuazione e sull'efficacia in diversi contesti clinici.

Zusammenfassung: Ziele: Ziel war es, Barrieren und unterstützende Faktoren einer effektiven Implementierung eines Outcome Monitoring- und Feedbacksystems in einem psychotherapeutischen Dienst des britischen nationalen Gesundheitssystems zu untersuchen. Methode: Ein Outcome Monitoring System wurde bei zwei Diensten eingeführt. Den Therapeuten wurde erweitertes Feedback nach der 4. Sitzung gegeben. Qualitative und quantitative Methoden wurden genutzt, einschließlich Fragebögen für Therapeuten und Patienten. Die thematischen Analysen wurden anhand von schriftlichen und mündlichen Rückmeldungen der Therapeuten durchgeführt. Analysen der Patientenergebnisse für 202 therapeutische Einheiten wurde mit Benchmarkdaten von 136 Therapieeinheiten verglichen, bei denen dem Therapeuten keine Rückmeldung gegeben wurde. Ergebnisse: Themen, welche die Durchführbarkeit und Akzeptanz des Feedbacksystems beeinflussten, waren das Ausmaß in dem Therapeuten die Instrumente und Rückmeldungen in die Therapie integrierten, die Verfügbarkeit der administrativen Unterstützung, die Informationstechnologie und die Komplexität des Dienstes. Durch das Feedback ergaben sich geringe Veränderungen des therapeutischen Verhaltens, welche sich in der Besprechung der Rückmeldungen im Rahmen von Supervision oder mit dem Patienten äußerten. Schlussfolgerung: Die Untersuchung spricht für eine Durchführbarkeit und Akzeptanz der Einführung eines Routinesystems in einem komplexen Dienst, jedoch müssen eine Reihe von Herausforderungen und Barrieren überwunden werden und Unterschiede zwischen Therapeuten sind erkennbar. Es bedarf weiterer Untersuchungen zur Implementierung und Effektivität in unterschiedlichen klinischen Settings.

Objetivo: Investigar as barreiras e os facilitadores do resultado da implementação efetiva de um sistema de feedback no serviço de terapia psicológica do Serviço Nacional de Saúde do Reino Unido. Método: Foi introduzido um sistema de monitorização de resultados em dois serviços. Após a quarta sessão foi dado um reforço de feedback aos terapeutas. Foram utilizados métodos qualitativos e quantitativos, incluindo questionários para os terapeutas e clientes. Foi realizada uma análise temática acerca dos dados de feedback escritos e verbalizados pelos terapeutas. A análise dos resultados dos clientes para 202 episódios da terapia foi comparada com dados de referência de 136 episódios de terapia sobre os quais não foi dado qualquer feedback aos terapeutas. Resultados: Os temas que influenciaram a viabilidade do sistema de feedback resultaram do modo como os terapeutas integraram as medidas e o feedback nas suas ações terapêuticas, desde o feedback até à discussão do feedback na supervisão e com os pacientes. Conclusões: Os resultados apoiam a viabilidade de montar um sistema de rotina num serviço tão complexo, mas é necessário ultrapassar uma série de desafios e barreiras, e as diferenças nos terapeutas são evidentes. É necessária mais investigação acerca da implementação e eficácia em diversos contextos clínicos.

目的:探討在一英國國家健康機構之心理治療服務中,有效運用效果監控與回饋系統的阻礙及促進因子。方法:將效果監控引入二個機構中,同時在第四次晤談後給予治療師增強的回饋。同時運用質化及量化方法,包括給治療師及病人進行問卷評估。對治療師的書面及口語回饋進行主題分析。比較治療師有接受回饋的病人之202段治療事件與治療師沒有接受回饋的病人之136段治療事件的治療效果差異。結果:治療師將評量及回饋納入治療過程的程度、行政支持的可得性、資訊科技及服務的複雜性,是影響回饋系統的可行性與可接受性之重要主題。但僅有極少量的治療師行為是導自於此回饋,包括與督導或病人討論這些回饋。結論:研究結果支持在一個複雜的服務體系中建構一個例行系統的可行性與可接受性,但需要克服很多的挑戰與阻礙因素,也顯見不同治療師的差異。未來需對不同機構進行更多應用及有效性的研究。

關鍵字:心理治療;效果監控;回饋;應用

Keywords: feedback; implementation; outcomes monitoring; psychological therapies.

Publication types

  • Research Support, Non-U.S. Gov't

MeSH terms

  • Adult
  • Feasibility Studies
  • Feedback*
  • Female
  • Health Services Research / statistics & numerical data
  • Humans
  • Male
  • Middle Aged
  • National Health Programs / statistics & numerical data*
  • Outcome Assessment, Health Care / methods*
  • Patient Acceptance of Health Care / statistics & numerical data*
  • Psychotherapy / methods*
  • United Kingdom