بررسی روایی و پایایی نمونه فارسی آزمون مشاهده مستقیم مهارت‌های عملی در شنوایی‌شناسی

نوع مقاله : مقاله پژوهشی

نویسندگان

1 گروه آموزش پزشکی، دانشکده پزشکی، دانشگاه علوم‌پزشکی ایران، تهران، ایران.

2 گروه پزشکی اجتماعی، مرکز تحقیقات طب پیشگیری و سلامت جمعیت، پژوهشکده پیشگیری از آسیب‌های اجتماعی، دانشکده پزشکی، دانشگاه علوم‌پزشکی ایران، تهران، ایران.

3 گروه شنوایی‌شناسی، دانشکده علوم توانبخشی، دانشگاه علوم‌پزشکی ایران، تهران، ایران.

چکیده

اهداف: امروزه مشاهده مستقیم مهارت‌های عملی (DOPS)، روشی برای ارزیابی عینی و قابل ‌اندازه‌گیری مهارت‌های بالینی و دادن بازخورد به دانشجویان است. مطالعه حاضر با هدف بررسی روایی و پایایی آزمون مشاهده مستقیم مهارت‌های عملی در ارزیابی مهارت‌های بالینی دانشجویان شنوایی‌شناسی انجام شد.
مواد و روش‌ها: در مطالعه‌ توصیفی تحلیلی و مقطعی حاضر، همه دانشجویان شنوایی‌شناسی مقطع کارورزی در عرصه دانشکده علوم توان‌بخشی دانشگاه علوم‌پزشکی ایران (25 نفر) انتخاب شدند. طبق نظرات اعضای هیئت‌علمی، از بین مهارت‌های اصلی شنوایی‌شناسی، سه مهارت به ‌عنوان مواد آزمون انتخاب شد. دانشجو پس از اعلام آمادگی و درخواست ارزیابی، هنگام انجام مهارت در محیط کار واقعی توسط آزمونگر آموزش‌دیده مورد مشاهده قرار گرفت و نتایج بر طبق چک‌لیست ساختاریافته ثبت شد. سپس دانشجویان در محیط مناسب، بازخورد عینی دریافت کردند. روایی صوری، محتوایی، سازه و پایایی آزمون، سنجش و گزارش شد.
یافته‌ها: یافته‌ها نشان داد که روایی محتوایی آزمون DOPSبا استفاده از شاخص روایی محتوایی بیش از 0/79 و نسبت روایی محتوایی بیش از 0/42 است. ضریب همبستگی اسپیرمن مهارت‌های ارزیابی شنوایی بزرگسال، ارزیابی وزوز گوش و ارزیابی پاسخ‌های برانگیخته شنوایی با نمره کل DOPS به ‌ترتیب0/742، 0/704، 0/785 گزارش شد که بیانگر ساختار درونی مطلوب آزمون و برخورداری از اعتبار سازه است (001/p <0). همچنین ضریب همبستگی ماتریس بالایی را بین تک‌تک سؤالات در مهارت‌های ارزیابی‌شده نشان داد که اعتبار سازه آزمون را تأیید می‌کند. پایایی آزمون توسط ضریب آلفای کرونباخ، 0/788 اندازه‌گیری شد. کمترین و بیشترین مقدار ضریب همبستگی در پایایی بین ارزیابان به‌ ترتیب 0/504 و 0/837 بود که در تمام موارد معنی‌دار بود. رضایت دانشجویان از آزمون DOPS، 88 درصد گزارش شد و در محدوده «راضی» تا «بسیار راضی» بودند. رضایت ارزیابان از آزمونDOPS در محدوده «راضی» تا «بسیار راضی» و به میزان 100 درصد گزارش شد.
نتیجه‌گیری: با توجه به نتایج مطالعه حاضر به نظر می‌رسد که استفاده از DOPS برای سنجش عینی مهارت‌های بالینی در رشته شنوایی‌شناسی دارای روایی و پایایی قابل‌‌قبول است.

کلیدواژه‌ها

موضوعات

عنوان مقاله [English]

Validity and Reliability of the Persian Version of Direct Observation of Procedural Skills Tool in Audiology

نویسندگان [English]

  • Reza Alborzi 1
  • Jalil Koohpayehzadeh 2
  • Masoumeh Rouzbahani 3
1 Department of Medical Education, School of Medicine, Iran University of Medical Sciences, Tehran, Iran.
2 Department of Community Medicine, Preventive Medicine and Public Health, Research Center, Social Injury Prevention Research Institute, School of Medicine, Iran University of Medical Sciences, Tehran, Iran.
3 Department of Audiology, School of Rehabilitation Sciences, Iran University of Medical Sciences, Tehran, Iran.
چکیده [English]

Background and Aims: Direct Observation of Procedural Skills (DOPS) is a method for objective assessment of clinical skills by providing feedback. The present study aims to evaluate the reliability and validity of the Persian version of DOPS for the assessment of clinical skills in audiology students.
Methods: In this descriptive analytical study with a cross-sectional design, participants were the students of audiology internship in the School of Rehabilitation Sciences, Iran University of Medical Sciences, Tehran, Iran. According to the panel of experts, three basic skills were selected as assessment items from among the main skills of audiology. After declaring consent, the students were assessed by a trained examiner while performing clinical skills in real clinical environment, and the results were recorded in a structured checklist. Then, students received feedback in an appropriate environment. Face, content, and construct validity and reliability of the Persian DOPS were then evaluated.
Results: The content validity index of the Persian DOPS was more than 0.79, and its Content validity ratio was more than 0.42. Spearman correlation coefficient for the relationship of pure tone assessment, tinnitus assessment, and auditory brainstem response assessment with the total DOPS score were 0.785, 0.704, and 0.742, respectively indicating its acceptable construct validity (p < 0.001). Cronbach’s alpha value for the reliability of the Persian DOPS was reported 0.788. Minimum and maximum values ​​of the correlation coefficient for the inter-rater reliability were 0.504 and 0.837, respectively which were significant in all tests. Students’ and raters’ satisfaction with the Persian DOPS was 88% and 100%, respectively ranged from satisfied to very satisfied.
Conclusion: The Persian DOPS is a valid and reliable tool for the objective assessment of procedural skills in audiology.

کلیدواژه‌ها [English]

  • Validity
  • Reliability
  • Audiology
  • Direct observation of procedural skills

مراجع

  1. Chehrzad M, Shafiei PZ, Mirzaei M, Kazemnejad E. Comparison between two methods: Objective Structured Clinical Evaluation (OSCE) and traditional on nursing students satisfaction. Journal of Guilan University of Medical Sciences. 2004; 13(50):8-13. https://www.sid.ir/en/journal/ViewPaper.aspx?id=34882
  2. Saif AA. [Measurement, assessment and evaluation of education (Persian)]. Tehran: Doran; 2015. https://www.google.com/books/edition/%D8%B2/SO0ojwEACAAJ?hl=en
  3. Kazemi A, Ehsanpour S, Hassanzadeh A. [Investigating the academic achievement evaluation of specialized theoretical courses of midwifery BS (Persian)]. Iranian Journal of Medical Education. 2010; 9(4):346-55. https://www.sid.ir/fa/journal/ViewPaper.aspx?id=107849
  4. Mitchell C, Bhat S, Herbert A, Baker P. Workplace-based assessments of junior doctors: Do scores predict training difficulties? Medical Education. 2011; 45(12):1190-8. [DOI:10.1111/j.1365-2923.2011.04056.x] [PMID]
  5. Wilkinson JR, Crossley JG, Wragg A, Mills P, Cowan G, Wade W. Implementing workplace-based assessment across the medical specialties in the United Kingdom. Medical Education. 2008; 42(4):364-73. [DOI:10.1111/j.1365-2923.2008.03010.x] [PMID]
  6. Bindal N, Goodyear H, Bindal T, Wall D. DOPS assessment: A study to evaluate the experience and opinions of trainees and assessors. Medical Teacher. 2013; 35(6):1230-4. [DOI:10.3109/0142159X.2012.746447] [PMID]
  7. Wilkinson J, Benjamin A, Wade W. Assessing the performance of doctors in training. BMJ. 2003; 327(7416):s91-2. [DOI:10.1136/bmj.327.7416.s91] [PMID]
  8. Sahebalzamani M, Farahani H, Jahantigh M. [Validity and reliability of direct observation of procedural skills in evaluating the clinical skills of nursing students of Zahedan nursing and midwifery school (Persian)]. Zahedan Journal of Research in Medical Sciences. 2012; 14(2):76-81. https://www.sid.ir/fa/journal/ViewPaper.aspx?id=152783
  9. Kouhpayezadeh J, Hemmati A, Baradaran HR, Mirhosseini F, Akbari H, Sarvieh M. Validity and reliability of direct observation of procedural skills in evaluating clinical skills of midwifery students of kashan nursing and midwifery school (Persian)]. Journal of Sabzevar University of Medical Sciences. 2014; 21(1):145-54. https://www.sid.ir/fa/journal/ViewPaper.aspx?id=216087
  10. Bould MD, Crabtree NA, Naik VN. Assessment of procedural skills in anaesthesia. British Journal of Anaesthesia. 2009; 103(4):472-83. [DOI:10.1093/bja/aep241] [PMID]
  11. Barton JR, Corbett S, van der Vleuten CP, Programme EBCS. The validity and reliability of a direct observation of procedural skills assessment tool: Assessing colonoscopic skills of senior endoscopists. Gastrointestinal Endoscopy. 2012; 75(3):591-7. [DOI:10.1016/j.gie.2011.09.053] [PMID]
  12. Weller J, Jolly B, Misur M, Merry A, Jones A, Crossley JM, et al. Mini-clinical evaluation exercise in anaesthesia training. British Journal of Anaesthesia. 2009; 102(5):633-41. [DOI:10.1093/bja/aep055] [PMID]

 

دوماهنامه علمی - پژوهشی طب توانبخشی
دوره 10، شماره 2
خرداد و تیر 1400
صفحه 346-357

فایل ها

سابقه مقاله

  • تاریخ دریافت: 19 فروردین 1399
  • تاریخ بازنگری: 11 تیر 1399
  • تاریخ پذیرش: 25 تیر 1399
  • تاریخ اولین انتشار: 01 خرداد 1400

هم رسانی

ارجاع به این مقاله

آمار