محاسبه روایی: سنجش دقت و درستی ابزارهای سنجش
در تحقیقات علمی، اتکا به ابزارهای سنجش دقیق و معتبر برای جمع آوری داده ها و اندازه گیری متغیرها، امری حیاتی است. روایی، یکی از مهم ترین مولفه های کیفی ابزارهای سنجش، به معنای دقت و درستی آنها در سنجش آنچه واقعا قصد دارند بسنجند، اشاره دارد. به عبارت دیگر، روایی نشان می دهد که تا چه حد می توان به نتایج حاصل از ابزار سنجش اعتماد کرد.
دو نوع اصلی روایی وجود دارد:
1. روایی محتوایی:
این نوع روایی به همخوانی محتوای ابزار سنجش با مفاهیم و موضوعاتی که قصد اندازه گیری آنها را دارد، می پردازد. برای ارزیابی روایی محتوایی، می توان از روش های مختلفی مانند نظرخواهی از متخصصان، مقایسه با ابزارهای سنجش مشابه و بررسی جامع محتوای ابزار استفاده کرد.
2. روایی ملاکی:
این نوع روایی به ارتباط نتایج ابزار سنجش با نتایج حاصل از ابزارهای سنجش معتبر دیگر یا معیارهای شناخته شده، می پردازد. برای ارزیابی روایی ملاکی، می توان از روش های مختلفی مانند همبستگی با ابزارهای سنجش دیگر، مقایسه با معیارهای شناخته شده و روش های همزمان یا با فاصله زمانی استفاده کرد.
انواع روایی ملاکی:
- روایی همزمان: در این روش، نتایج ابزار سنجش با نتایج حاصل از یک ابزار سنجش معتبر دیگر که به طور همزمان اجرا می شود، مقایسه می شوند.
- روایی با فاصله زمانی: در این روش، نتایج ابزار سنجش با نتایج حاصل از یک ابزار سنجش معتبر دیگر که در زمان دیگری اجرا می شود، مقایسه می شوند.
- روایی پیش بین: در این روش، نتایج ابزار سنجش با معیارهای شناخته شده ای که در آینده قابل اندازه گیری هستند، مقایسه می شوند.
- روایی ساختاری: در این روش، ساختار داخلی ابزار سنجش و ارتباط بین مولفه های مختلف آن مورد بررسی قرار می گیرد.
محاسبه روایی:
روش های مختلفی برای محاسبه روایی ابزارهای سنجش وجود دارد که هر کدام بسته به نوع روایی و نوع ابزار سنجش مورد استفاده قرار می گیرند. برخی از روش های رایج محاسبه روایی عبارتند از:
- ضریب همبستگی: این روش برای سنجش روایی همزمان و با فاصله زمانی استفاده می شود و میزان همبستگی بین نتایج ابزار سنجش و نتایج ابزار سنجش معتبر دیگر یا معیارهای شناخته شده را اندازه گیری می کند.
- شاخص توافق: این روش برای سنجش روایی طبقه بندی استفاده می شود و میزان توافق بین طبقه بندی های انجام شده توسط ابزار سنجش و طبقه بندی های انجام شده توسط متخصصان یا ابزارهای سنجش معتبر دیگر را اندازه گیری می کند.
- شاخص K: این روش برای سنجش روایی طبقه بندی استفاده می شود و میزان توافق بین طبقه بندی های انجام شده توسط دو نفر را اندازه گیری می کند.
اهمیت محاسبه روایی:
محاسبه روایی ابزارهای سنجش از اهمیت بالایی برخوردار است زیرا به ما نشان می دهد که تا چه حد می توان به نتایج حاصل از این ابزارها اعتماد کرد. نتایج حاصل از ابزارهای سنجش با روایی بالا، اطلاعات موثق و قابل اعتمادی را برای تصمیم گیری ها و اقدامات بعدی در تحقیقات علمی، برنامه ریزی آموزشی، ارزیابی عملکرد و سایر زمینه ها ارائه می دهند.
عوامل موثر بر روایی:
عوامل مختلفی می توانند بر روایی ابزارهای سنجش تاثیر بگذارند، از جمله:
- طراحی ابزار سنجش: وضوح، سادگی و جامعیت سوالات، تناسب سوالات با موضوع مورد سنجش، و ساختار منطقی ابزار از جمله عوامل مهم در طراحی ابزار سنجش هستند که بر روایی آن تاثیر می گذارند.
- نحوه اجرای ابزار سنجش: شرایط اجرا، آموزش های لازم به پاسخ دهندگان، و انگیزه و توجه پاسخ دهندگان از جمله عوامل مهم در نحوه اجرای ابزار سنجش هستند که بر روایی آن تاثیر می گذارند.
- تجزیه و تحلیل داده ها
امروزه برای بررسی بسیاری از متغیرها و پدیدهها در جامعه، از ابزارهای مختلفی استفاده میشود. یکی از رایجترین ابزارها، استفاده از پرسشنامهها است. اما نمیتوان از هر پرسشنامهای استفاده کرد و پیش از استفاده، باید از اعتبار آن مطمئن شد. یعنی باید اطمینان حاصل شود که آن پرسشنامه، متغیر موردنظر را اندازهگیری میکند. شاخصی که به ما کمک میکند تا اعتبار پرسشنامه را بسنجیم، بررسی و محاسبه روایی پرسشنامه است.
روایی پرسشنامه چیست؟
منظور از مفهوم روایی این است که پرسشنامهای که میخواهید استفاده کنید، تا چه حد متغیر موردنظر شما را میسنجد. در واقع با بررسی روایی پرسشنامه، شما متوجه خواهید شد که آیا پرسشنامه طراحی شده برای اندازهگیری و بررسی ویژگی پایاننامه شما مناسب است یا نه؟ سه نوع روایی وجود دارد که عبارتند از روایی محتوا، روایی ملاک، روایی سازه. کاربردیترین و مهمترین روايي، روايي محتوا است.
نحوه محاسبه روايي محتوای پرسشنامه
براي تعيين روايي محتوای یک پرسشنامه از قضاوت متخصصان درباره سؤالهای پرسشنامه استفاده میشود. برای این منظور، باید پرسشنامه بین حداقل 4 فرد متخصص توزیع شود و آنها در مورد هر یک از سؤالها نظر دهند و یکی از سه گزینه “کاملا ضروری”، ” نه ضروري و نه غیرضروری ” و “کاملا غیرضروری” را انتخاب کنند. و سپس برای هریک از سوالات تعداد افرادی که گزینه کاملا ضروری را انتخاب کردند را تعیین کنید. سپس رابطه زیر را برای تکتک سوالات پرسشنامه محاسبه کنید:
(تعداد افرادی که گزینه کاملا ضروری را انتخاب کردند – نصف تعداد کل متخصصانی که نظر دادهاند) تقسیم بر نصف تعداد کل متخصصانی که نظر دادهاند.
سپس این عدد به دست آمده را با اعداد موجود در جدولی که به جدول لاشه معروف است و در زیر ارائه شده، مقایسه کنید. اگر عدد به دست آمده عددی منفی باشد، باید آن سوال را از پرسشنامه حذف کرد. همچنین اگر عدد به دست آمده از عددهای جدول کوچکتر باشد، آن سوال باید از پرسشنامه حذف گردد.
جدول لاشه
تعداد افراد متخصص که در مورد سوال پرسشنامه نظر دادهاند | حداقل میزان روایی برای پذیرش سوال |
5 | 0.99 |
6 | 0.99 |
7 | 0.99 |
8 | 0.75 |
9 | 0.78 |
10 | 0.62 |
11 | 0.59 |
12 | 0.56 |
13 | 0.54 |
14 | 0.51 |
15 | 0.49 |
20 | 0.42 |
25 | 0.37 |
30 | 0.33 |
35 | 0.31 |
40 | 0.29 |
نکته مهم
اگر روایی پرسشنامه در تحقیقات مشابه به اثبات رسیده بود، نیازی به بررسی مجدد روایی پرسشنامه نیست و میتوان به بررسیهای انجام شده در تحقیقات قبلی استناد کرد.