Umeå universitets logga

umu.sePublikationer
Ändra sökning
RefereraExporteraLänk till posten
Permanent länk

Direktlänk
Referera
Referensformat
  • apa
  • apa-6th-edition.csl
  • ieee
  • modern-language-association-8th-edition
  • vancouver
  • Annat format
Fler format
Språk
  • de-DE
  • en-GB
  • en-US
  • fi-FI
  • nn-NO
  • nn-NB
  • sv-SE
  • Annat språk
Fler språk
Utmatningsformat
  • html
  • text
  • asciidoc
  • rtf
Reliability of instruments that measure situation awareness, team performance and task performance in a simulation setting with medical students
Umeå universitet, Medicinska fakulteten, Institutionen för kirurgisk och perioperativ vetenskap, Anestesiologi och intensivvård.ORCID-id: 0000-0003-2935-7161
Umeå universitet, Medicinska fakulteten, Institutionen för kirurgisk och perioperativ vetenskap, Anestesiologi och intensivvård. Umeå universitet, Medicinska fakulteten, Institutionen för omvårdnad.ORCID-id: 0000-0001-7974-6777
Umeå universitet, Medicinska fakulteten, Institutionen för omvårdnad.
Umeå universitet, Medicinska fakulteten, Institutionen för folkhälsa och klinisk medicin, Avdelningen för medicin.
Visa övriga samt affilieringar
2019 (Engelska)Ingår i: BMJ Open, E-ISSN 2044-6055, Vol. 9, nr 9, artikel-id e029412Artikel i tidskrift (Refereegranskat) Published
Abstract [en]

OBJECTIVES: The assessment of situation awareness (SA), team performance and task performance in a simulation training session requires reliable and feasible measurement techniques. The objectives of this study were to test the Airways-Breathing-Circulation-Disability-Exposure (ABCDE) checklist and the Team Emergency Assessment Measure (TEAM) for inter-rater reliability, as well as the application of Situation Awareness Global Assessment Technique (SAGAT) for feasibility and internal consistency.

DESIGN: Methodological approach.

SETTING: Data collection during team training using full-scale simulation at a university clinical training centre. The video-recorded scenarios were rated independently by four raters.

PARTICIPANTS: 55 medical students aged 22-40 years in their fourth year of medical studies, during the clerkship in anaesthesiology and critical care medicine, formed 23 different teams. All students answered the SAGAT questionnaires, and of these students, 24 answered the follow-up postsimulation questionnaire (PSQ). TEAM and ABCDE were scored by four professionals.

MEASURES: The ABCDE and TEAM were tested for inter-rater reliability. The feasibility of SAGAT was tested using PSQ. SAGAT was tested for internal consistency both at an individual level (SAGAT) and a team level (Team Situation Awareness Global Assessment Technique (TSAGAT)).

RESULTS: The intraclass correlation was 0.54/0.83 (single/average measurements) for TEAM and 0.55/0.83 for ABCDE. According to the PSQ, the items in SAGAT were rated as relevant to the scenario by 96% of the participants. Cronbach's alpha for SAGAT/TSAGAT for the two scenarios was 0.80/0.83 vs 0.62/0.76, and normed χ² was 1.72 vs 1.62.

CONCLUSION: Task performance, team performance and SA could be purposefully measured, and the reliability of the measurements was good.

Ort, förlag, år, upplaga, sidor
2019. Vol. 9, nr 9, artikel-id e029412
Nyckelord [en]
patient care team, resuscitation, situation awareness, task performance and analysis, teamwork
Nationell ämneskategori
Övrig annan medicin och hälsovetenskap
Identifikatorer
URN: urn:nbn:se:umu:diva-163368DOI: 10.1136/bmjopen-2019-029412ISI: 000497787600184PubMedID: 31515425Scopus ID: 2-s2.0-85072144998OAI: oai:DiVA.org:umu-163368DiVA, id: diva2:1351878
Tillgänglig från: 2019-09-17 Skapad: 2019-09-17 Senast uppdaterad: 2023-09-05Bibliografiskt granskad
Ingår i avhandling
1. Knowing what’s going on: situation awareness and team performance in interprofessional teams
Öppna denna publikation i ny flik eller fönster >>Knowing what’s going on: situation awareness and team performance in interprofessional teams
2021 (Engelska)Doktorsavhandling, sammanläggning (Övrigt vetenskapligt)
Abstract [en]

Background Within critical care, it is necessary to have an awareness ofwhat is going on in order to be able to make the right decision at the right time.Situation awareness (SA) is a non-technical skill (NTS) that is important instressful, complex environments such as the intensive care unit (ICU).Deficiencies in NTS are well known to impact performance and thereby causeadverse events. More knowledge about how background factors are associatedto team performance and explore critical care team members experiencesteamwork are of importance to develop models for improving teamwork. Aneducational intervention aiming to improve SA during critical events might bevaluable to improve the performance of interprofessional teams. For this,instruments for assessment of SA and NTS are needed.

Aim The aim of this thesis was to test different instruments for measuringSA, team performance and task performance for feasibility and reliability; to investigate the relationship between team background characteristics, teamperformance and task performance; to evaluate an educational programme inSA for intensive care teams; and to explore team members’ experience ofteamwork.

Methods This thesis was based on data from 69 different video-recordedteam training sessions with a simulator as a patient (studies I–III) and ninefocus group interviews (Study IV). In Study I, the participants were 55 medicalstudents, and the sessions took place at a clinical training centre. Theparticipants in Study II (n=105) and III (n=75) were ICU staff members fromtwo different hospitals, and the sessions took place in situ at the respectiveICUs. In Study III, the participants were randomized into control orintervention group, where the intervention group received an educationalintervention comprising lectures and reflective discussions. The control grouponly performed team training without lectures and reflective discussions. Thetraining sessions were analysed with a focus on team and task performanceusing the TEAM instrument and the ABCDE checklist, respectively. Inaddition, a questionnaire (SAGAT) was used to assess individuals’ SA (StudyI and III). The data in Study I–III were quantitatively analysed. In Study IV,focus group interviews with staff members (n= 31) from the ICUs wereanalysed using qualitative content analysis.

Results The findings in Study I showed that SAGAT was feasible to use andthat the inter-rater reliability for the ABCDE checklist and the TEAMinstrument indicated sufficient stability. In Study II, higher age wasassociated with several aspects of good team performance such as teamwork,task management, team overall and total team. Prior team training withoutvideo was associated with better task performance, while prior education incommunication was negatively associated with leadership. In Study III, theresults demonstrated that the educational intervention improved theperformance of the intervention group in the TEAM subscales of leadershipand task management, as well as in the total score. In Study IV, the mainfinding presented as a theme was balancing knowledge and behaviour inteamwork. The interviews revealed three categories of aspects that facilitatevor act as barriers to teamwork: (1) having potential for excellence while copingwith members who do not act as team players; (2) creating a safe atmospherewhile working in an unknown environment and struggling to maintain one’spositions; and (3) being in a workflow without becoming overwhelmed.

Conclusions By implementing an educational programme focusing on SA,different parts of interprofessional team performance could be improved. Foroptimal interprofessional teamwork in the ICU, both knowledge andbehaviours were essential components. For the studies in this thesis, thedifferent instruments used were both feasible and reliable. High age wasrelated to good team and task performance, indicating that generic factors thatis associated with age might influence team and task performance.This thesis will probably contribute to a safer care of seriously ill patients at ICU.

Abstract [sv]

Att veta vad som händer vid akuta situationer inom intensivvård av svårt sjuka eller skadade är nödvändigt för att kunna ta rätt beslut vid rätt tidpunkt. Arbetsmiljön på intensivvårdsavdelningar (IVA) beskrivs därför som komplex och kräver välutbildad och erfaren personal. Brister i icke-tekniska färdigheter är ett problem i hälso- och sjukvården och inte minst inom intensivvården. Bristerna påverkar kvalitén i utförandet och orsakar vårdskador. Utifrån erfarenhet och kunskap inom flygindustrin har icketekniska färdigheter börjat komma i fokus inom akutsjukvård och intensivvård. En viktig del i icke-tekniska färdigheter ärsituationsmedvetenhet (eng; situation awareness, SA) och under de senaste årtiondena har modeller för SA och teamarbete utvecklats. I dagsläget finns endast ett fåtal studier som specifikt utvärderar utbildning i SA i interprofessionella team, in situ och med hjälp av simulering. Föreliggandeavhandling har därför fokus på interprofessionella IVA-team, SA och teamprestation och förmåga att hantera och genomföra arbetsuppgifter. 

Avhandlingen omfattar fyra delarbeten. För att genomföra studie II och III krävdes en initial studie (studie I) vars syfte var att kvalitetssäkra tre mätmetoder avseende användbarhet och reliabilitet: dels en teknik för att mäta situationsmedvetenhet (SAGAT), dels ett instrument för att mäta teamets prestation (TEAM instrument) och dels en checklista för att mäta teamets förmåga att hantera arbetsuppgifter (ABCDE checklist). Därefter analyserades relationen mellan teamets bakgrundskaraktäristika och teamets prestation och hantering av arbetsuppgifter (studie II). I studie III utvärderades ett utbildningsprogram med fokus på SA inklusive simuleringsövningar in situ. För att få en djupare förståelse för fenomenet teamarbete inom IVA, genomfördes en intervjustudie där tre personalgrupper som vanligen ingår i IVA-team intervjuades med fokus på erfarenheter om teamarbete.

Deltagarna i delstudie 1 var 55 läkarstudenter på termin sju som fördelades i 23 team. De två följande delstudierna (II och III) omfattade undersköterskor (n=30), sjuksköterskor (n=49) och läkare (n=26) som arbetade vid två intensivvårdsavdelningar vid två olika sjukhus i norra Sverige. Deltagarna i studie III delades slumpmässigt in i 11 team (interventionsgrupp) respektive 9 team (kontrollgrupp). I delstudie IV deltog 31 individer från delstudie II och III fördelade på nio fokusgrupper. 

Interventionen i delstudie III utgjordes av ett kort utbildningsprogram med fokus på att förstå betydelsen av situationsmedvetenhet i teamarbete samt hur den kan uppnås. Den första delen av utbildningen var webbaserad med korta lektioner om situationsmedvetenhet och samarbete varvat med instuderingsuppgifter och reflektionsfrågor. Deltagarna genomförde utbildningen individuellt en vecka före teamträningstillfället. Teamträningstillfället för interventionsgruppen inleddes med en reflektionstimme där olika reaktioner från webutbildningen diskuterades med fokus på hur de olika begreppen skulle omsättas i praktiken. Därefter genomförde teamet ett patientscenario in situ, på en intensivvårdsplats. Efter scenariet återsamlades teamet för en andra reflektion med fokus på hur teamet kan åstadkomma och bibehålla hög situationsmedvetenhet för att gemensamt kunna fatta rätt beslut. Teamträningen avslutades med ytterligare ett patientscenario in situ. Kontrollgruppen teamtränade utan att ha genomfört webutbildningen, utan reflektionen före scenario nummer ett, samt att reflektionen efter scenario nummer ett genomfördes utan specifikt fokus på situationsmedvetenhet.

Vid datainsamlingen till studie I-III genomförde deltagarna teamövningar innefattande olika scenarier med svårt sjuk patient (SimMan, en avancerad patientsimulator). Samtliga teamövningar videofilmades och analyserades avseende teamets samarbete och genomförande av arbetsuppgifter. I studie I och III mättes deltagarnas situationsmedvetenhet med frågeformulär under scenariet. Ett kort uppehåll gjordes där deltagarna svarade på frågor. En vecka efter avslutad övning fick deltagarna i studie I besvara en enkät om hur avbrottet påverkat det pågående scenariet. Data från dessa tre första studier analyserades med hjälp av statistiska metoder. Datainsamlingen till studie IV genomfördes med fokusgruppsintervjuer. Intervjuerna ljudinspelades och analyserades med kvalitativ innehållsanalys. 

Resultatet från studie I visade att det fanns en god samstämmighet mellan de fyra bedömare som skattade teamets prestation. Med hjälp av ett frågeformulär angav studenterna att tekniken som användes för att mäta teamets situationsmedvetenhet var användbart och användarvänligt.

Resultatet i delstudie II visade att det fanns ett positivt samband mellan genomsnittlig ålder och teamets övergripande prestation och samarbete, samt hur teamet prioriterade och hanterade arbetsuppgifter. Vidare visade resultatet att tidigare erfarenhet av att ha tränat i team också innebar bättre förmåga att hantera arbetsuppgifterna. Däremot visade analyserna att tidigare utbildning i kommunikation också innebar sämre ledarskap. 

Huvudresultatet i denna avhandling visar på positiva skillnader i prestation hos team som fått utbildning med fokus på situationsmedvetenhet jämfört med kontrollgruppen som inte fått utbildning. De team som erhållit utbildning presterade bättre. Förbättringen kunde mätas i subskalorna ledarskap och prioritering av arbetsuppgifter. Inga skillnader kunde dock påvisas i situationsmedvetenhet eller i genomförande av arbetsuppgifter. 

I fokusgruppsintervjuerna (delstudie IV) beskrev deltagarna sina erfarenheter av teamarbetet i det interprofessionella teamet som bestod av både främjande och hindrande aspekter: 1) att ha potential för excellens och samtidigt hantera teammedlemmar som inte agerar som lagspelare, 2) att skapa en säker atmosfär och samtidigt arbeta i en okänd omgivning och kämpa för att upprätthålla sin position i teamet, samt 3) att vara i ett flöde av arbetsuppgifter utan att bli överbelastad. Av kategorierna framgår att fenomenet teamarbete handlar om att balansera kunskap och beteende vilket också bildade temat i delstudien. Deltagarna upplevde att det var viktigt att arbeta i en trygg miljö som präglades av respekt och stöd på intensivvårdsavdelningen men även när de arbetade på exempelvis akutmottagningen. Det framkom också att även om arbetet kunde upplevas stressigt och rörigt kunde det ändå finnas ett flyt. 

Sammantaget bidrar avhandlingens resultat till att visa att en utbildning med fokus på situationsmedvetenhet kan förbättra hur team inom intensivvården presterar. Vidare har balansen i kunskap och beteende lyfts fram som viktigt för samarbetet inom teamet. De instrument som använts för att mäta deltagarnas prestationer och situationsmedvetenhet var tillförlitliga och användbara i denna kontext. Slutligen fanns ett positivt samband mellan hög ålder och god teamprestation, samt till genomförande av arbetsuppgifter. Detta samband fanns inte till yrkeserfarenhet vilket antyder att det i bakgrunden skulle kunna finnas någon icke teknisk färdighet som samvarierar med ålder.

Ort, förlag, år, upplaga, sidor
Umeå: Umeå Universitet, 2021. s. 63
Serie
Umeå University medical dissertations, ISSN 0346-6612 ; 2110
Nyckelord
Critical care, interprofessional education, leadership, learning, situation awareness, simulation-based team training, team performance, teamwork
Nationell ämneskategori
Omvårdnad Hälso- och sjukvårdsorganisation, hälsopolitik och hälsoekonomi
Forskningsämne
omvårdnadsforskning med medicinsk inriktning
Identifikatorer
urn:nbn:se:umu:diva-178076 (URN)978-91-7855-438-6 (ISBN)978-91-7855-437-9 (ISBN)
Disputation
2021-01-29, Aula Biologica, Biologihuset, Umeå universitet, Umeå, 09:00 (Svenska)
Opponent
Handledare
Tillgänglig från: 2021-01-08 Skapad: 2020-12-30 Senast uppdaterad: 2023-05-17Bibliografiskt granskad

Open Access i DiVA

fulltext(368 kB)372 nedladdningar
Filinformation
Filnamn FULLTEXT01.pdfFilstorlek 368 kBChecksumma SHA-512
59fe4c1303a73c36075250d59504216a82fdfc907c89321ea099c62b23cfbff1ffba67df56db348b95de524ef3974ec8c396050456f128760feb367e30071570
Typ fulltextMimetyp application/pdf

Övriga länkar

Förlagets fulltextPubMedScopus

Person

Hultin, MagnusJonsson, KarinHärgestam, MariaLindkvist, MarieBrulin, Christine

Sök vidare i DiVA

Av författaren/redaktören
Hultin, MagnusJonsson, KarinHärgestam, MariaLindkvist, MarieBrulin, Christine
Av organisationen
Anestesiologi och intensivvårdInstitutionen för omvårdnadAvdelningen för medicin
I samma tidskrift
BMJ Open
Övrig annan medicin och hälsovetenskap

Sök vidare utanför DiVA

GoogleGoogle Scholar
Totalt: 372 nedladdningar
Antalet nedladdningar är summan av nedladdningar för alla fulltexter. Det kan inkludera t.ex tidigare versioner som nu inte längre är tillgängliga.

doi
pubmed
urn-nbn

Altmetricpoäng

doi
pubmed
urn-nbn
Totalt: 763 träffar
RefereraExporteraLänk till posten
Permanent länk

Direktlänk
Referera
Referensformat
  • apa
  • apa-6th-edition.csl
  • ieee
  • modern-language-association-8th-edition
  • vancouver
  • Annat format
Fler format
Språk
  • de-DE
  • en-GB
  • en-US
  • fi-FI
  • nn-NO
  • nn-NB
  • sv-SE
  • Annat språk
Fler språk
Utmatningsformat
  • html
  • text
  • asciidoc
  • rtf