Nổi bật
- Đánh giá trì hoãn dựa trên video đối với các kỹ năng phi kỹ thuật của đội cấp cứu cho điểm trung bình tương đương với đánh giá trực tiếp trong hồi sức ngừng tim.
- Mức độ đồng thuận ở từng sự kiện giữa đánh giá trực tiếp và đánh giá qua video còn hạn chế, cho thấy sự biến thiên khi chấm điểm các ca cụ thể.
- Những người chấm điểm lớn tuổi, nhiều kinh nghiệm hơn cho thấy mức độ phù hợp cao hơn giữa đánh giá trực tiếp và xem lại video.
- Xem lại video vẫn có giá trị cho họp rút kinh nghiệm nhóm và giám sát chất lượng, nhưng cần người chấm giàu kinh nghiệm khi thực hiện đánh giá các sự kiện cá nhân có mức độ quan trọng cao.
Bối cảnh nghiên cứu
Làm việc nhóm hiệu quả và các kỹ năng phi kỹ thuật, bao gồm giao tiếp, lãnh đạo và quản lý nhiệm vụ, là những yếu tố quyết định quan trọng đối với thành công trong các tình huống cấp cứu có tính chất then chốt như hồi sức ngừng tim ở người lớn. Thang đo Team Emergency Assessment Measure (TEAM) là một công cụ đã được thẩm định, được thiết kế để định lượng các kỹ năng phi kỹ thuật này và do đó được dùng như một chỉ số phục vụ cải tiến chất lượng và đào tạo.
Trong khi đánh giá trực tiếp ghi nhận động lực nhóm theo thời gian thực, phương pháp này có thể chịu ảnh hưởng bởi sai lệch hồi tưởng và các hạn chế quan sát. Rà soát dựa trên video cho phép đánh giá hồi cứu với khả năng xem lại nhiều lần, nhưng giá trị và độ tin cậy của nó so với chấm điểm trực tiếp trong các ca hồi sức thực tế vẫn chưa rõ. Việc hiểu mức độ phù hợp giữa hai phương pháp này và ảnh hưởng của kinh nghiệm người chấm có ý nghĩa quan trọng đối với bảo đảm chất lượng lâm sàng và nghiên cứu.
Thiết kế nghiên cứu
Nghiên cứu quan sát tiến cứu này được thực hiện trong năm 2024 tại khoa cấp cứu tuyến cuối ở Đài Loan. Các ca hồi sức ngừng tim ở người lớn được ghi hình video như một phần của hoạt động cải tiến chất lượng thường quy. Với mỗi sự kiện, một bác sĩ hoặc điều dưỡng đã được đào tạo và trực tiếp tham gia hồi sức sẽ thực hiện đánh giá TEAM ngay lập tức, trực tiếp sau sự kiện. Khoảng 30 ngày sau, chính người chấm đó đánh giá lại cùng ca hồi sức từ bản ghi video, trong trạng thái không biết các điểm chấm ban đầu, nhằm đo lường tính nhất quán và mức độ đồng thuận giữa điểm số trực tiếp và điểm số video trì hoãn.
Tiêu chí đánh giá chính là mức độ đồng thuận giữa điểm TEAM trực tiếp và qua video, bao gồm tổng điểm TEAM và điểm đánh giá tổng quát. Các chỉ số đồng thuận bao gồm hệ số tương quan nội lớp (Intraclass Correlation Coefficient, ICC) và phân tích Bland-Altman. Phân tích nhóm thăm dò khảo sát sự khác biệt về mức độ đồng thuận theo trình độ kinh nghiệm của người chấm (người chấm cao cấp so với người chấm trẻ).
Kết quả chính
Tổng cộng 105 ca hồi sức ngừng tim ở người lớn đã được ghi nhận, trong đó có 80 cặp đánh giá đủ để phân tích. Điểm TEAM tổng quát trung bình gần như giống nhau giữa đánh giá trực tiếp và đánh giá qua video (8,25 so với 8,22; chênh lệch cặp trung bình -0,03, KTC 95%: -0,25 đến 0,20), cho thấy không có sai lệch hệ thống ở mức độ nhóm.
Tuy nhiên, tổng điểm làm việc nhóm thấp hơn một chút khi xem lại video so với đánh giá trực tiếp (chênh lệch cặp trung bình -1,00, KTC 95%: -1,77 đến -0,23), cho thấy xu hướng chấm khắt khe hơn khi đánh giá hồi cứu từ bản ghi.
Mức độ đồng thuận ở từng sự kiện còn hạn chế, với ICC là 0,21 (KTC 95%: 0,00 đến 0,41) đối với tổng điểm TEAM và 0,16 (KTC 95%: -0,06 đến 0,37) đối với điểm tổng quát, phản ánh khả năng lặp lại từ kém đến trung bình khi xem xét từng ca ngừng tim riêng lẻ. Phân tích Bland-Altman cho thấy giới hạn đồng thuận rộng, với điểm số qua video trung bình thấp hơn điểm số trực tiếp 1,24 điểm và giới hạn trải dài từ -12,28 đến 9,80 điểm, nhấn mạnh mức độ biến thiên lớn trong từng trường hợp.
Đáng chú ý, người chấm cao cấp cho thấy mức độ phù hợp giữa hai phương pháp cao hơn người chấm trẻ, gợi ý rằng kinh nghiệm giúp cải thiện tính nhất quán giữa chấm điểm trực tiếp và chấm điểm qua video.
Bình luận chuyên gia
Các phát hiện này góp phần củng cố hiểu biết đang hình thành rằng, mặc dù rà soát video có thể ghi nhận đáng tin cậy chất lượng làm việc nhóm ở mức độ nhóm trong hồi sức, nhưng những sắc thái tinh tế và yếu tố bối cảnh có thể bị bỏ sót khi chấm hồi cứu, dẫn đến khác biệt ở đánh giá từng sự kiện. Việc điểm số giảm nhẹ khi xem video có thể xuất phát từ mức độ xem xét khắt khe hơn hoặc từ sự mất đi cảm nhận tình huống nhập cuộc vốn có ở người chấm trực tiếp.
Các giá trị ICC thấp rõ rệt đến trung bình cho thấy cần thận trọng khi diễn giải đánh giá dựa trên video nếu được dùng cho các quyết định quan trọng như đánh giá năng lực cá nhân của bác sĩ hoặc cấp chứng chỉ hành nghề. Như đã chứng minh, chuyên môn của người chấm ảnh hưởng đáng kể đến độ tin cậy của các đánh giá này, qua đó củng cố khuyến nghị sử dụng người đánh giá giàu kinh nghiệm, được đào tạo theo phương pháp TEAM, và cân nhắc cách tiếp cận nhiều người chấm hoặc quy trình thẩm định có cấu trúc.
Các hạn chế bao gồm thiết kế nghiên cứu đơn trung tâm và chỉ sử dụng một người chấm cho mỗi sự kiện, điều này có thể hạn chế khả năng khái quát hóa và độ chính xác. Nghiên cứu trong tương lai có thể tập trung vào việc cải thiện quy trình xem video, tích hợp ghi hình đa góc độ và xây dựng các chương trình đào tạo người chấm nhằm giảm thiểu biến thiên.
Kết luận
Đánh giá TEAM trì hoãn dựa trên video đối với các kỹ năng phi kỹ thuật trong hồi sức ngừng tim ở người lớn cho kết quả trung bình tương tự như đánh giá trực tiếp ngay lập tức, nhưng mức độ đồng thuận ở từng ca hồi sức còn hạn chế. Tính nhất quán cải thiện khi người chấm có kinh nghiệm cao hơn. Xem lại video vẫn là một công cụ hữu ích cho họp rút kinh nghiệm nhóm và giám sát chất lượng; tuy nhiên, để đánh giá chính xác các ca hồi sức cụ thể—đặc biệt khi dùng cho thẩm định nghề nghiệp—cần có người chấm giàu kinh nghiệm và các biện pháp bảo đảm có cấu trúc nhằm bảo đảm diễn giải đáng tin cậy.
Kinh phí và ClinicalTrials.gov
Nghiên cứu được hỗ trợ bởi nguồn tài trợ từ cơ sở; không ghi nhận đăng ký thử nghiệm lâm sàng.
Tài liệu tham khảo
- Lien CJ, Yu PH, Huang SK, Chang JH, Pei-Chuan Huang E. Live Versus Delayed Video-Based TEAM Assessment During Real-World Cardiac Arrest: Agreement and Exploratory Differences by Rater Experience. Annals of Emergency Medicine. 2026 Nov 6; PMID: 42998077.
- Cooper S, Wakelam A. Teamwork and non-technical skills in resuscitation. Postgraduate Medical Journal. 1999;75(886):405-409.
- O’Connell KJ, O’Connor P, Kerr KM, Smith CM. Accuracy and reliability of video-assisted evaluation of resuscitation teams: a systematic review. Resuscitation. 2018;126:40-46.
- Cooper S, Cant R, Kelly M. Non-technical skills in resuscitation. Resuscitation. 2010;81(6):700-706.
Công cụ tính theo chuyên khoa
Công cụ tính được hiển thị bằng tiếng Anh.
Dùng để tham khảo lâm sàng, kết hợp với đánh giá chuyên môn.
