ارزیابی اثربخشی دورهٔ آموزشی؛ الگوی دانشگاه فرهنگیان

ارزیابی اثربخشی دورهٔ آموزشی باید روشن کند چه تغییری انتظار می‌رود، چه شاهدی برای آن لازم است و نتیجه برای کدام تصمیم استفاده خواهد شد. حضور در کلاس، رضایت از مدرس، یادگیری و استفاده از آموخته‌ها، پرسش‌های متفاوتی‌اند. مطالعهٔ دانشگاه فرهنگیان که در این صفحه معرفی می‌شود، دربارهٔ طراحی الگوی ارزیابی است؛ طراحی الگو را نباید با اثبات اثر واقعی یک دوره بر سلامت یا عملکرد کارکنان یکی دانست.

معرفی دقیق مطالعهٔ دانشگاه فرهنگیان

عنوان مطالعه «طراحی الگوی ارزیابی اثربخشی دوره‌های آموزشی سلامت مدیریت بالندگی حرفه‌ای و اسلامی (مورد مطالعه: دانشگاه فرهنگیان)» است. نویسندگان آن محمدرضا عبدلی، علی یزدخواستی، تقی آقاحسینی و هادی رمضانیان‌اند. اثر در سبک زندگی اسلامی با محوریت سلامت، دورهٔ ۷، شمارهٔ ۱، پیاپی ۳۲، بهار ۱۴۰۲، صفحات ۳۹۸ تا ۴۱۱ نمایه شده است.

این معرفی بر چکیدهٔ خود مقاله که در پایگاه‌های نمایه بازنشر شده است تکیه دارد؛ متن کامل مقاله برای این مرور در دسترس نبود. بنابراین جزئیات آزمون ابزار، فهرست کامل شاخص‌ها و هر نتیجه‌ای که در چکیده گزارش نشده، به پژوهش نسبت داده نمی‌شود.

روش گزارش‌شده و مرز اطلاعات در دسترس

چکیده، روش را کاربردی و «آمیخته از نوع اکتشافی» نامیده است، اما شرح در دسترسِ گردآوری و تحلیل، بر مصاحبه‌های نیمه‌ساختاریافته و تحلیل محتوای کیفی تمرکز دارد. مشارکت‌کنندگان، صاحب‌نظران و متخصصان علوم تربیتیِ شاغل در دانشگاه فرهنگیان بودند که به‌صورت هدفمند انتخاب شدند؛ مصاحبه‌ها تا اشباع ادامه یافت.

طبق همین گزارش، داده‌ها ابتدا کدگذاری و سپس مقوله‌ها، مؤلفه‌ها و مدل نهایی صورت‌بندی شدند. از این توصیف نمی‌توان تعداد مصاحبه‌ها، نمونهٔ کمّی یا ضریب آماریِ گزارش‌نشده‌ای استخراج کرد.

الگوی ۱۰۸ شاخصی چه ساختاری دارد؟

چکیده از ۱۰۸ شاخص در سه مؤلفهٔ اصلی گزارش می‌دهد:

• راهبرد: هدف‌گذاری، نظارت و اجرا.

• مهارت: مهارت‌های فردی، سازمانی و اجتماعی.

• فرایند: مدیریت، آموزش و امور مالی ـ اداری.

این‌ها مؤلفه‌ها و زیرمؤلفه‌های گزارش‌شده‌اند؛ فهرست نه‌گانهٔ بالا جای ۱۰۸ شاخص تفصیلی را نمی‌گیرد. برای تبدیل این ساختار به ابزار اجرایی، باید تعریف هر شاخص، شیوهٔ امتیازدهی، منبع داده و شواهد اعتبار آن از متن اصلی بررسی شود.

تعداد زیاد شاخص‌ها به‌خودی‌خود نشان‌دهندهٔ کیفیت بیشتر ارزیابی نیست. باید معلوم باشد هر شاخص کدام پرسش را پاسخ می‌دهد و آیا دادهٔ آن با هزینه و دقت مناسب قابل گردآوری است. این نکته، ملاحظهٔ نقادانهٔ این مرور است و نتیجهٔ یک آزمون تازه دربارهٔ مدل مقاله نیست.

چکیده دربارهٔ اثر دوره چه اطلاعاتی می‌دهد؟

در چکیدهٔ بررسی‌شده، مقایسهٔ معتبر اثر یک دوره بر سلامت جسم و روان، ترک خدمت، بهره‌وری یا بازگشت سرمایه گزارش نشده است. خروجیِ گزارش‌شده، ساختار الگوی ارزیابی است. بنابراین نمی‌توان از آن درصد موفقیت یک دوره یا بهبود قطعی عملکرد کارکنان را نتیجه گرفت.

همچنین قرارگرفتن «سلامت» در عنوان، به‌تنهایی شاهد اثر درمانی یا پیشگیرانه نیست. برای چنین ادعایی باید پیامد سلامت، ابزار سنجش، زمان پیگیری و طراحی بررسی اثر مشخص باشند. در این صفحه توصیهٔ درمانی یا ادعای بهبود سلامت به مدل نسبت داده نمی‌شود.

مدل‌های عمومی ارزیابی آموزش چگونه کمک می‌کنند؟

کرک‌پاتریک: چهار پرسش متفاوت

چهار سطح شناخته‌شدهٔ کرک‌پاتریک شامل واکنش، یادگیری، رفتار و نتایج است. واکنش به تجربهٔ آموزش، با کسب دانش یا مهارت یکی نیست؛ یادگیری نیز به‌تنهایی نشان نمی‌دهد آموخته‌ها در محیط کار به کار رفته‌اند. برای سطح رفتار باید کاربرد واقعی و شرایط پشتیبان آن بررسی شود و برای نتایج، پیامد هدفِ سازمان روشن باشد.

راهنمای رسمی کنونی نیز این سطوح را یک نردبان خطیِ خودکار معرفی نمی‌کند. رضایت بالا، اثبات نتایج سازمانی نیست؛ طراحی ارزیابی باید از پیامد مطلوب و زمینهٔ عملکرد آغاز شود. این چارچوب عمومی، با الگوی سه‌مؤلفه‌ای مطالعهٔ فرهنگیان یک مدل واحد محسوب نمی‌شود.

CIPP: زمینه، درونداد، فرایند و محصول

در مدل CIPP استافل‌بیم، پرسش از نیازها و مسئلهٔ برنامه آغاز می‌شود و راهبردها و منابع، اجرای برنامه و نتایج آن بررسی می‌شوند. این نگاه می‌تواند برای اصلاح برنامه و داوری دربارهٔ ارزش آن به کار رود؛ تمرکز آن فقط بر آزمون پایان دوره نیست. صرفِ هم‌نام‌بودن «فرایند» در دو چارچوب، به معنی یکسان‌بودن تمام مؤلفه‌ها نیست.

ROI: بازده مالی با فرض‌های روشن

در روش‌شناسی ROI فیلیپس، بازده مالی با مقایسهٔ منافع خالص پولیِ منتسب به برنامه و هزینه‌های کامل آن محاسبه می‌شود:

ROI (درصد) = ۱۰۰ × (منافع پولی برنامه − هزینهٔ کامل برنامه) ÷ هزینهٔ کامل برنامه

پیش از استفاده از فرمول، باید سهم برنامه از تغییر مشاهده‌شده و روش پولی‌کردن منافع روشن شود. منافع غیرقابل پولی‌سازی را می‌توان جداگانه گزارش کرد. این محاسبه برای تمام دوره‌ها الزامی نیست و در چکیدهٔ در دسترسِ پژوهش فرهنگیان نیز محاسبهٔ ROI یک دوره گزارش نشده است.

از الگو تا طرح ارزیابی یک دوره

برای نمونه‌ای فرضی، یک دورهٔ بهبود گزارش‌نویسی اداری را در نظر بگیرید. می‌توان ارتباط محتوا با نیاز شغلی را از شرکت‌کنندگان پرسید، کیفیت یک تکلیف یکسان را پیش و پس از دوره بررسی کرد و بعدتر، کاربرد آموخته‌ها را در نمونه‌های واقعی گزارش سنجید. این‌ها سه نوع شاهد متفاوت‌اند و نباید صرفاً در یک نمرهٔ رضایت ادغام شوند.

مقایسهٔ پیش و پس به‌تنهایی ثابت نمی‌کند تمام تغییر ناشی از دوره بوده است؛ تجربهٔ کاری، تغییر دستورالعمل یا حمایت مدیر هم ممکن است نقش داشته باشند. انتخاب آزمون آماری نیز به نوع داده، وابستگی اندازه‌گیری‌ها و طرح بررسی بستگی دارد؛ آزمون t نسخهٔ همیشگیِ محاسبهٔ اثربخشی نیست.

الگوی دانشگاه فرهنگیان می‌تواند به طرح پرسش دربارهٔ راهبرد، مهارت و فرایند کمک کند. استفادهٔ اجرایی در سازمان دیگر، نیازمند بررسی متن کامل، تناسب شاخص‌ها و شواهد سنجش است. نتیجهٔ قابل دفاع این مرور، معرفی یک الگوی پیشنهادی و حدود شواهد آن است؛ نه تأیید آماده‌بودن یک ابزار استاندارد برای هر دوره.

منابع

عبدلی، محمدرضا، یزدخواستی، علی، آقاحسینی، تقی و رمضانیان، هادی. (۱۴۰۲). طراحی الگوی ارزیابی اثربخشی دوره‌های آموزشی سلامت مدیریت بالندگی حرفه‌ای و اسلامی (مورد مطالعه: دانشگاه فرهنگیان). سبک زندگی اسلامی با محوریت سلامت، ۷(۱)، ۳۹۸–۴۱۱. دامنهٔ بررسی: چکیدهٔ نویسندگان و مشخصات اثر در نمایه‌ها.

Kirkpatrick Partners. The Kirkpatrick Model. معرفی رسمی چهار سطح ارزیابی.

Stufflebeam, D. L. (2007). CIPP Evaluation Model Checklist. Second edition. Western Michigan University Evaluation Center.

ROI Institute. ROI Methodology. معرفی رسمی سطوح، فرایند و محاسبهٔ بازده سرمایه‌گذاری.