Content analysis of psychological first aid training manuals via topic modelling

Eur J Psychotraumatol. 2023;14(2):2230110. doi: 10.1080/20008066.2023.2230110.

Abstract

Background: Psychological First Aid (PFA) is practiced worldwide. This practice in English is guided through a small collection of training manuals. Despite ubiquitous practice and formal training materials, little is known about what topics are covered and in what depth in these influential manuals. As such, we analyzed the topic structure of these training manuals.Objective: To model the PFA manuals' topics with the goal of identifying a set of topics with recurrent themes and evaluating the extent to which each manual demonstrated those themes.Method: This machine learning study employed an unsupervised topic modelling design using Latent Dirichlet Allocation. The variables are (1) the distribution of a word across documents and (2) the distribution of a word across topics. The level of measurement for all variables is continuous. The unit of analysis is words. Preprocessing and data analysis were carried out using the Orange Data Mining Toolbox (Demšar et al., 2013). This programme is a Python GUI.Results: Results indicated a ten-topic structure to the universe of the English PFA training manuals. These topics were: (1) Refugees, (2) Orientation Activities, (3) Community-Based Applications, (4) PTSD & Other Psychological Issues, (5) Training Materials, (6) Specific Helper Instructions, (7) PFA Scholarship, (8) MHPSS, (9) General Curriculum, and (10) Australian Specific Delivery. The depth of discourse on each topic varied widely between manuals.Conclusions: The Academics of the PFA topic shows a strong representation of the corpus and suggests current training manuals have stayed true to its evidence-supported practice. The topic of Community-Based Applications strongly represents the corpus and suggests that training models incorporate community-based applications. The scientific foundation and practical implementation of the training guides are essential elements. Limitations and implications were also discussed.

Antecedentes: Los Primeros Auxilios Psicológicos (PAP) son practicados en todo el mundo. Esta práctica en Inglés está guiada a través de una pequeña colección de manuales de formación. A pesar de la práctica omnipresente y los materiales de capacitación formales, se sabe poco sobre qué temas son tratados, y con qué profundidad, en estos manuales influyentes. De esta manera, analizamos la estructura temática de estos manuales de capacitación.

Objetivo: Modelar los temas de los manuales de PAP con el objetivo de identificar un conjunto de temáticas con temas recurrentes y evaluar en qué medida cada manual demostró tales temas.

Método: Este estudio de aprendizaje automático empleó un diseño de Modelado no supervisado de temas utilizando la asignación de Dirichlet latente. Las variables son (1) la distribución de una palabra en los documentos y (2) la distribución de una palabra en los temas. El nivel de medición para todas las variables es continuo. La unidad de análisis son las palabras. El pre-procesamiento y el análisis de datos se llevaron a cabo utilizando el software de minería de datos Orange (Demšar et al., 2013). Este programa es una interfaz gráfica de Python.

Resultados: Los resultados indicaron una estructura de diez temáticas para el universo de los manuales de capacitación de PAP en inglés. Estos temas fueron: (1) Refugiados, (2) Actividades de orientación, (3) Aplicaciones basadas en la comunidad, (4) TEPT y otros problemas psicológicos, (5) Materiales de capacitación, (6) Instrucciones específicas para ayudantes, (7) Becas PAP, (8) salud mental y el apoyo psicosocial (SMASS), (9) Plan de estudios general y (10) Entrega específica de Australia. La profundidad del discurso sobre cada tema varió ampliamente entre los manuales.

Conclusiones: La Academia de los PAP muestra una fuerte representación del corpus y sugiere que los manuales de capacitación actuales se han mantenido fieles a su práctica respaldada por evidencia. El tema de las aplicaciones basadas en la comunidad representa fuertemente el corpus y sugiere que los modelos de capacitación incorporan aplicaciones basadas en la comunidad. La fundamentación científica y la implementación práctica de las guías de formación son elementos esenciales. También se discutieron las limitaciones y las implicaciones.

背景: 心理急救 (PFA) 在全球廣泛實施。這種英語實行是靠一小部分培訓 手冊來指導。儘管實行和訓練教材無處不在,但這些有影響力的手冊涵蓋了哪些主題以及深度知之甚少。

目的: 使用 Latent Dirichlet Allocation 對 心理急救手冊進行主題建模研究,旨在發現一組具有重複主題的題材 ,並分析每本手冊展示這些主題的程度。

方法: 本機器學習研究採用了無監督主題建構設計。變量是 (1) 一個詞在文檔中的分佈和 (2) 一個詞在主題中的分佈。我們使用橘子數據挖掘工具箱 (Demšar et al., 2013) 進行預處理和數據分析。這個程序是一個 Python 圖形用戶界面。

結果: 結果表明英語心理急救 培訓手冊的整體結構有十個主題。這些主題是:(1) 難民,(2) 導引活動,(3)社區為主的應用,(4) 創傷創傷壓力症候群和其他心理問題,(5) 培訓材料,(6) 助人者的特定指導,(7) PFA 學術研究, (8) 心理健康和社會心理支持,(9) 一般課程,以及 (10) 澳大利亞特定教導。不同手冊對每個主題的討論深度差異很大。

結論: 心理急救學術主題顯示了語料庫的強大代表性,表明當前的培訓手冊一直忠實於其循證實踐。基於社區的應用主題強烈代表了語料庫,表明訓練模型包含社區的應用實施。培訓手冊的科學依據和實際應用是關鍵組成部分。此外還討論了局限性和影響。

Keywords: Gensim; LDA; LDAvis; Orange Data Mining; PFA; Primeros auxilios psicológicos; PAP; Psychological First Aid; artificial intelligence; asignación de Dirichlet latente; inteligencia artificial; latent Dirichlet allocation; modelado de temas; multiculturalism; multiculturalismo; topic modelling; 主题模型; 人工智能; 多元文化主义; 心理急救; 橙色数据挖掘; 潜在狄利克雷分配; 自然语言处理; 语料库语言学.

Plain language summary

Little is known about what topics are covered and in what depth in the influential PFA English manuals.We conducted a topic modelling study using Latent Dirichlet Allocation, aiming to discover a set of topics with recurring themes and analyze the degree to which each manual exhibited those topics.Results indicated a 10-topic structure to the universe of the English PFA training manuals.The training manuals’ scientific basis and practical application are key components, while notable gaps presented.

MeSH terms

  • Australia
  • Data Mining / methods
  • Humans
  • Machine Learning*
  • Psychological First Aid*