A peer assessment method to provide feedback, consistent grading and reduce students' burden in massive teaching settings

پاسخ دادن به پاسخ باز پاسخ در یک دوره عظیم، یک کار مهم است که نمی تواند بدون کمک یک سیستم هوشمند که بتواند توانایی کارشناسان را گسترش دهد، نمی تواند مدیریت شود. برای این روش یک روش ارزیابی همکار استفاده می شود. دانش آموزانی که پاسخهای خود را نیز نوشتند، نقش گریدرها را برای مجموعه ای از پاسخ های ارائه شده توسط سایر دانش آموزان نیز بازی می کنند. نمرات به دست آمده برای جمع آوری داده ها به منظور ارائه یک سطح معقول کلی برای هر پاسخ می باشد. با این حال، این سیستم ها دو معضل آشکار برای دانش آموزان را نشان می دهد: آنها بار سنگین کار خود را افزایش می دهند و نمراتی که دانش آموزان در نهایت بازخورد فاقد توضیح دلایل نمرات خود را دریافت می کنند. سهم این مقاله شامل یک پیشنهاد برای غلبه بر این کاستی ها است. دانش آموزانی که به عنوان گریدرها عمل می کنند خواسته می شود تا تعدادی از جنبه های مختلف را ارزیابی کنند. یکی از آنها درجه کلی است، اما حاشیه نویسی های دیگری نیز وجود دارد که می تواند برای توضیح درجه کلی باشد. علاوه بر این، ما پاسخ هایی را که دانش آموزان (اسناد متنی) به عنوان ورودی ها در یک کار یادگیری ارائه می دهند، نشان می دهیم، که در آن خروجی ها جنبه هایی است که باید ارزیابی شوند (برچسب ها با سطح مقدماتی). پیشنهاد ما این است که همه ی این برچسب ها را یک بار با استفاده از رویکرد چند وظیفه ای که از فاکتور سازی ماتریکس استفاده می کند یاد بگیریم. روش ارائه شده در این مقاله نشان می دهد که ارزیابی همکار می تواند بازخوردی را ارائه دهد و همچنین می تواند به پاسخ های دانش آموزانی که در حلقه ارزیابی همتایان دخیل نبوده است، گسترش یابد و به طور قابل توجهی باعث کاهش بار دانشجویان شود. ما جزئیات روش و تعدادی از آزمایشات را با استفاده از سه مجموعه داده به دست آمده از دوره های مربوط به رشته های مختلف در دانشگاه ارائه می کنیم.