Sensitivity and specificity of the method used for ascertainment of healthcare-associated infections in the second Slovenian national prevalence survey

Zdr Varst. 2016 Jul 28;55(4):248-255. doi: 10.1515/sjph-2016-0034. eCollection 2016 Dec 1.

Abstract

Introduction: The second Slovenian national healthcare-associated infections (HAIs) prevalence survey (SNHPS) was conducted in acute-care hospitals in 2011. The objective was to assess the sensitivity and specificity of the method used for the ascertainment of six types of HAIs (bloodstream infections, catheter-associated infections, lower respiratory tract infections, pneumoniae, surgical site infections, and urinary tract infections) in the University Medical Centre Ljubljana (UMCL).

Methods: A cross-sectional study was conducted in patients surveyed in the SNHPS in the UMCL using a retrospective medical chart review (RMCR) and European HAIs surveillance definitions. Sensitivity and specificity of the method used in the SNHPS using RMCR as a reference was computed for ascertainment of patients with any of the six selected types of HAIs and for individual types of HAIs. Agreement between the SNHPS and RMCR results was analyzed using Cohen's kappa coefficient.

Results: 1474 of 1742 (84.6%) patients surveyed in the SNHPS were included in RMCR. The sensitivity of the SNHPS method for detecting any of six HAIs was 90% (95% confidence interval (CI): 81%-95%) and specificity 99% (95% CI: 98%-99%). The sensitivity by type of HAI ranged from 63% (lower respiratory tract infections) to 92% (bloodstream infections). Specificity was at least 99% for all types of HAIs. Agreement between the two data collection approaches for HAIs overall was very good (κ=0.83).

Conclusions: The overall sensitivity of SNHPS collection method for ascertaining HAIs overall was high and the specificity was very high. This suggests that the estimated prevalence of HAIs in the SNHPS was credible.

Uvod: Druga slovenska nacionalna presečna raziskava bolnišničnih okužb (SNPRBO) je potekala leta 2011 v slovenskih bolnišnicah za akutno oskrbo v okviru evropske presečne raziskave okužb, povezanih z zdravstvom, in uporabe protimikrobnih zdravil v bolnišnicah za akutno oskrbo. Cilj naše raziskave je bil oceniti občutljivost in specifičnost metode za prepoznavanje šestih pomembnih vrst bolnišničnih okužb (BO): okužb kirurške rane, okužb krvi, okužb, povezanih z žilnimi katetri, okužb sečil, okužb spodnjih dihal brez pljučnic in pljučnic (ki predstavljajo približno tri četrtine vseh BO) v Univerzitetnem kliničnem centru Ljubljana (UKCL).

Metode: Izvedli smo presečno raziskavo med bolniki UKCL, ki so bili vključeni v SNPRBO. Uporabili smo metodo retrospektivnega pregleda medicinske dokumentacije (RPMD) in evropske standardne definicije za namene epidemiološkega spremljanja BO. Izračunali smo občutljivost in specifičnost metode za prepoznavanje bolnikov z vsaj eno izmed šestih izbranih BO v SNPRBO v primerjavi z referenčno metodo RPMD in za posamezne vrste BO. Skladnost rezultatov SNHPS in RMCR smo ugotavljali s koeficientom kappa po Cohenu.

Rezultati: Od 1742 bolnikov, ki so bili vključeni v SNPRBO, smo v RPMD vključili 1474 (84,6%) bolnikov. Občutljivost SNPRBO metode za prepoznavanje bolnikov z vsaj eno od šestih izbranih vrst BO je bila 90% (95-odstotni interval zaupanja: 81%-95%). Specifičnost je bila 99% (95-odstotni interval zaupanja: 98%-99%). Ocenjena občutljivost za posamezne vrste BO je bila najnižja za okužbe spodnjih dihal brez pljučnic (63%) in najvišja za okužbe krvi (92%). Specifičnost za vse vrste BO je bila 99% ali višja. Skladnost rezultatov SNPRBO in RPMD glede prepoznanih BO je bila zelo dobra (κ=0,83). Najpogostejši vzrok za neprepoznavanje BO v SNPRBO je bil nepravilna uporaba definicij BO za namene epidemiološkega spremljanja oziroma njihovo slabo poznavanje. Pomanjkljiva medicinska dokumentacija v času RPMD pa bi bila lahko vzrok za neprepoznavanje nekaterih BO z RPMD.

Zaključki: Občutljivost metode, uporabljene za prepoznavanje BO v SNPRBO, je bila visoka in specifičnost zelo visoka. Skladnost pristopov prepoznavanja BO v SNPRBO in RPMD je bila zelo dobra. Zaključimo lahko, da je bila ocena prevalence BO v SNPRBO verodostojna. Temeljito usposabljanje zbiralcev podatkov za pravilno uporabo definicij BO za namene epidemiološkega spremljanja in zagotavljanje čim bolj popolnega beleženja podatkov, ki so pomembni za prepoznavanje BO v medicinski dokumentaciji, sta pomembni za izboljšanje občutljivosti metod prepoznavanja vseh vrst BO v bodočih nacionalnih presečnih raziskavah.

Keywords: Slovenia; cross-sectional study; healthcare-associated infections; prevalence; retrospective medical chart reviews; sensitivity; specificity.