Inter-rater reliability of the South African Triage Scale: Assessing two different cadres of health care workers in a real time environment

ObjectiveTo estimate the inter-rater reliability of triage ratings within individual cadres of health care workers (HCWs) and between different cadres of HCWs using the South African Triage Scale (SATS).MethodsFive final year medical students (FMSs), two enrolled nurses (ENs) and two Enrolled Nursing Assistants (ENAs), who had all been trained in the use of the SATS, were selected to prospectively triage Emergency Centre (EC) patients in real time. Twenty five patients were triaged twice on the first day by individual participants, and another 25 were triaged twice by a collaborative team on the second day. Quadratically weighted kappa (QWK) point estimates were calculated with 95% confidence intervals to assess agreement.ResultsFor 25 patients analysed on day one, the QWK values were very high within professions triaging individually: among the FMSs (QWK = 0.94; 95% CI: 0.82–1.0), among the ENs (QWK = 0.92; 95% CI: 0.74–1.0) and moderate between the FMSs and ENs (QWK = 0.57; 95% CI: 0.33–0.81). For 25 patients analysed on day two a team of ENA and FMS, triaging collaboratively, demonstrated moderate agreement (QWK = 0.65; 95% CI: 0.46–0.85).ConclusionThe inter-rater reliability of SATS ratings is excellent within individual HCWs, but significantly lower between different HCWs. This confirms previous reliability studies of the SATS using vignettes and if validated by larger studies would support the feasibility of further implementation of the SATS in primary health care settings across the Western Cape.

ObjectifEstimer la fidélité interjuges des taux de triage au sein de cadres individuels de membres du personnel soignant (MPS) et entre différents cadres de MPS utilisant l’échelle de triage sud-africaine (SATS, South African Triage Scale).MéthodesDes étudiants en cinquième et dernière année de médecine (FMS), deux infirmiers (EN) et deux infirmiers auxiliaires (ENA) qui ont tous été formés à l’utilisation de la SATS, ont été sélectionnés pour trier prospectivement des patients du Centre d’urgence (CU) en temps réel. 25 patients ont été triés deux fois au cours de la première journée par des participants individuels et 25 autres ont été triés deux fois par une équipe conjointe le second jour. Des estimations du point kappa pondéré quadratique (KPQ) ont été calculées avec des intervalles de confiance de 95% afin d’évaluer l’accord.RésultatsPour 25 patients analysés le premier jour, les valeurs KPQ étaient très élevées en ce qui concerne le triage par profession individuelle: parmi les FMS (KPQ = 0,94; 95% IC: 0,82-1,0), parmi les EN (KPQ = 0,92; 95% IC: 0,74-1,0) et étaient modérées entre les FMS et les EN (KPQ = 0,57; 95% IC: 0,33-0,81). Concernant les 25 patients analysés le second jour, une équipe d’ENA et de FMS, triant conjointement les patients, a montré un accord modéré (KPQ = 0,65; 95% IC: 0,46-0,85).ConclusionLa fidélité interjuges des taux de SATS est excellente au sein des MPS individuels, mais significativement inférieure entre les différents MPS. Cette conclusion confirme les études de fidélité de SATS antérieures utilisant des vignettes et, si cela était validé, par des études plus importantes, cela étayera la faisabilité d’une mise en œuvre plus importante de la SATS dans des contextes de soins de santé primaires dans le Cap occidental.

The SATS provides highly reliable acuity ratings when used in a primary care level setting. Collaborative team triage is less reliable than individual triage in a real time environment. Studies are recommended to describe thought processes of different cadres of health care workers at triage.