הערכה ואמידה בלמידה מבוזרת Evaluation & Assessment For Distributed Education גולן חמדני

הגדרת הערכה ואמידה הערכה הינה תהליך איסוף וניתוח של נתונים במטרה להציג הערכה על טיב ההוראה והקורס. אמידה היא שיטה למדידת הישגי הסטודנטים. הערכה מתייחסת לרמת המקרו של תהליך הלמידה (המנחה, הקורס והסטודנט) ואילו אמידה מתייחסת לרמת המיקרו – הסטודנט. אמידה היא אחת ממרכיבי ההערכה.

מטרות ההערכה והאמידה תכנון הקורס ומטרתו אל מול היישום בפועל, מדידת ההתקדמות לקראת המטרות הרצויות שיפור הקורס – משוב על תכני הקורס, איכות ההוראה, ניצול יעיל של הזמן, שיטת העברה של הקורס, מידת התועלת של התרגולים והמטלות, המבחנים, משוב על שירותי מנהלה וכו'. הישגים לימודיים של הסטודנט – ציון בקורס, תרגולים ומטלות, מבחנים, השתתפות בפורום/צ'אט וכו'. נפרט על ה"איך" בהמשך...

מי מעריך ואת מה? הסטודנטים המנחה הקורס הערכה אמידה

טכניקות איסוף נתונים בהערכה תצפיות המשתתף הטהור, המשתתף הצופה ומה שביניהם שאלונים וסקרים ראיונות רשמי/לא רשמי, פומבי/יחידות

סוגי הערכה הערכה מסכמת – Summative Evaluation הערכה מעצבת – Formative Evaluation הערכה מסכמת – Summative Evaluation הערכה יכולה להיות מעצבת, מסכמת או שילוב של שניהם.

הערכה מעצבת Formative Evaluation מתיחסת הן לתהליך הקורס והן לתוצר הסופי של הקורס מתבצעת בכל שלב משלבי הקורס כולל בסוף הקורס מאפשרת שיפור של הקורס ככל שמתקדמים בו מאפשרת לזהות פערים ובעיות בתוכנית הקורס אל מול היישום בפועל ולבצע שינויים בהתאם מאפשרת למנחה ולסטודנט משוב על התקדמות בחומר הנלמד ועל קשיים בקורס

הערכה מסכמת Summative Evaluation מתיחסת רק לתוצר הסופי של הקורס – לקורס בשלמותו מתבצעת רק בסוף הקורס מאפשרת לשפר או לבנות תוכנית-קורס חדשה לא מאפשרת שיפורים ושינויים בקורס הנוכחי אלא בקורס הבא

שיטות הערכה הערכה איכותנית – Qualitative Evaluation הערכה כמותית – Quantitative Evaluation הערכה איכותנית – Qualitative Evaluation שיטות לאיסוף מידע גם להערכה מעצבת וגם להערכה מסכמת. הערכה יכולה להיות כמותית, איכותית או שילוב של שניהם.

הערכה כמותית Quantitative Evaluation שאלות שניתן לנתח בצורה סטטיסטית ולערוך בטבלאות ובתרשימים. לדוגמא: שימוש בסולם דרגות, שאלות כן/לא,רשימת בחירה מגבילה את הסטודנטים לענות בצורה מסוימת ורק לקטגוריות מסוימות שהוגדרו מראש. מצריכה מדגם רחב והטרוגני של סטודנטים (שלא כמו רוב הקורסים של למידה מבוזרת) בשביל ניתוח סטטיסטי יעיל.

הערכה כמותית - המשך... אחוז תגובה נמוך בהערכה כמותית יכול לנבוע מכך שרק אלו שהרגישו חיובי או שלילי בקשר לקורס הגיבו להערכה. ניתוחים סטטיסטיים נראים לעתים מדויקים ואמינים למרות שלמעשה הם רחוקים מהמציאות.

הערכה איכותנית Qualitative Evaluation איסוף מידע בצורה רחבה ומפורטת יותר. לדוגמא: שאלות פתוחות, תצפיות (משתתף, צופה), ראיונות. שיטה יותר גמישה ודינמית, אינה מגבילה את הסטודנטים לענות בצורה מסוימת ורק לקטגוריות מסוימות שהוגדרו מראש. מאפשרת לגלות נקודות ונושאים חדשים. יותר קשה לנתח סטטיסטית, לסכם את הממצאים לערוך בטבלאות ובתרשימים. אופן איסוף מסורבל ומשעמם של הנתונים יכול להרתיע מביצוע הערכה איכותנית

מה להעריך בלמידה מבוזרת? השימוש בטכנולוגיה – היכרות, בעיות, היבטים חיוביים, נוחות. פורמט הקורס – אפקטיביות ההרצאות, הדיונים, השאלות והתשובות ; איכות השאלות/הבעיות שהועלו בקורס, האפשרות שניתנה לסטודנטים להביע את עצמם. האווירה בקורס – האם תרמה ללימודי הסטודנט?, האיכות והכמות של האינטרקציה בין הסטודנטים ובין המנחה. תכני הקורס – רלוונטיות, ארגון ורצף התכנים.

מה להעריך בלמידה מבוזרת? המשך... מטלות ומבחנים בקורס – תועלת, רמת הקושי, זמן נדרש לביצוע, תדירות, זמן לקבלת הציונים. היחס של הסטודנט לקורס – מעורבות, נוכחות והשתתפות, הגשת משימות. המנחה – מקצועיות וידע, אפקטיביות, מידת מוכנות לקורס, יחס לסטודנט, התלהבות ופתיחות. שירותים נלווים לקורס – תמיכה בתקלות, שירותי ספריה, זמינות המנחה, טכנולוגיה.

דוגמאות לכלי הערכה כלים להערכת תוכנות מולטימדיה, אתרי אינטרנט, בנית שאלונים וראיונות ועוד

דוגמאות לכלי הערכה Questionnaire Generator – כלי ליצירת שאלוני הערכה

דוגמאות לכלי הערכה מערכת "בימה וירטואלית" במכללת לחינוך ע"ש קיי בב"ש

דוגמאות לכלי הערכה מערכת "בימה וירטואלית" במכללת לחינוך ע"ש קיי בב"ש

סוגי אמידה אמידה מעצבת – Formative assessment תהליך שמתמשך בכל נקודת זמן במשך הקורס ומטרתו לתת כלים לשיפור והתקדמות במהלך הקורס. אמידה מסכמת – Summative assessment מתבצעת בסוף יחידה או קורס ומטרתה לתת ציונים ולהסמיך ידע גלובלי של הסטודנטים. אמידת השמה – Placement assessment אמידה שמטרתה מיון הסטודנטים לקבוצות, מגמות ומסלולים בהתאם להישגיהם.

סוגי אמידה – המשך... אמידה מאבחנת – Diagnostic assessment אמידה המתבצעת בסיום של חלק מתהליך הלימוד, ויכולה לכסות נושא מסוים, או סיכום של רצף נושאים רחב. היא בודקת את רמת הידע של התלמיד על-מנת לשפר את הידע שלו בנושאים אלו. אמידה עצמית – Self assessment אמידה שמבוצעת ע"י הסטודנט לעצמו. אמידת עמיתים – Peer assessment אמידה שמבוצעת ע"י קבוצה או סטודנט אחד לסטודנטים אחרים.

סוגי אמידה – חלוקה אחרת... אמידה מסמיכה – Certification assessment אמידה שבסיומה נקבע עבור הנאמד, על-פי עמידתו בקריטריונים שנבדקו, האם הוא הוסמך או לא (ולעתים גם למה הוא הוסמך). אמידה תקופתית – Periodic assessment אמידה המתבצעת לרוב באופן החוזר על עצמו אחת לתקופת זמן, או אמידה שמתבצעת בשלבים קבועים כחלק ממסגרת. אמידת רציפה – Continuous assessment אמידה רציפה אמורה לספק לאומד מידע על מידת ההתקרבות של הנאמד למטרה בכל רגע נתון של תקופת הלמידה. הרעיון הוא לעקוב באופן רציף אחר הלומד, ולאמוד את יכולתו מההתחלה ועד לסיום.

שיטות אמידה שיטת אמידה מסורתית – Traditional assessment שיטת אמידה מסורתית מיועדת למדוד את הלמידה ברמות חשיבה נמוכות כמו שינון וזכירה של החומר הנלמד. כל סוגי המבחנים "נייר-עפרון" שייכים לשיטות אמידה מסורתיות. מבחנים מודפסים או ממוחשבים, טקסטואליים או ויזואליים.

שיטות אמידה – המשך... שיטת אמידה חלופית – Alternative assessment שיטה חלופית בודקת בעיקר את רמות החשיבה הגבוהה: יכולת קוגניטיבית – פתירת בעיות, חשיבה קריטית, ניסוח שאלות, חיפוש ושימוש במידע יכולת מטא-קוגניטיבית – תכנון פעולה, בחירת אסטרטגיה יכולת חברתית – תקשורת עם הסביבה, ניהול שיחה ודיון, עבודת צוות, הקשבה, שכנוע, הנהגה יכולת אישית - נקיטת יוזמה, אחריות, כושר ריכוז, הנעה פנימית, התמדה יכולת פסיכו-מוטורית – מיומנויות של מערכת השרירים ותנועה, פעילויות פיזיות שדורשות תיאום, דיבור והדגמת יכולת פיזית.

דוגמאות לשיטות אמידה חלופיות פרויקטים עצמאיים וקבוצתיים פורטפוליו הדמיות ותרחישים לימוד מבוסס בעיות משימות מהחיים האמיתיים טכנולוגיות התומכות באמידה חלופית: דואר אלקטרוני, מציאות וירטואלית, ועידת חוזי, שיחוח, קבוצות דיון או פורום

דוגמאות לכלי אמידה חלופיים

דוגמאות לכלי אמידה חלופיים

דוגמאות לכלי אמידה חלופיים

דוגמאות לכלי אמידה חלופיים

דוגמאות לכלי אמידה חלופיים

דוגמאות לכלי אמידה חלופיים

מודל להערכה ואמידה בלמידה מבוזרת זמן (Time) וזרימה (Flow) אסינכרוני אסימטרי אסינכרוני סימטרי (Groupness) קבוצתיות סינכרוני אסימטרי קבוצה אחת n-n סינכרוני סימטרי תת-קבוצה n-m יחיד 1-1 מקום אחד מספר מקומות ריבוי מקומות מקום (Space) ממד הזמן והזרימה מגדיר האם פעולת הערכה מתבצעת באותו זמן והאם קיימת תקשורת דו-כיוונית בין המשתתפים בזמן ביצוע ההערכה. ממד הקבוצתיות מציין את השפעת גודל הקבוצה וחלוקתה לקבוצות על תוכן הערכה. מוגדר כגודל קבוצה עבורה מתוכנן תהליך ההערכה. ממד המקום – מייצג את האפשרויות השונות למיקום הסטודנטים השותפים בהערכה.

מודל הקוביות – ממד זמן וזרימה אסינכרוני סימטרי - הערכה נמשכת זמן רב קשר סימטרי הינו חלק מהערכה מנחה מבקר ויוצר משוב בונה במהלך הביצוע ניתן להעריך גם את מהלך הביצוע מתאים להערכה מעצבת אסינכרוני אסימטרי - הערכה בכל מקום ובכל זמן נעריך את התוצר הסופי מתאים להערכה מעצבת סינכרוני אסימטרי - הערכה בזמן-אמת מנחה אינו חלק פעיל ממשימה נעריך את התוצר הסופי מתאים להערכה מסכמת מסורתית ולקבוצות גדולות סינכרוני סימטרי - הערכה בזמן-אמת מנחה משחק תפקיד פעיל, הוא חלק מסביבת נערכה ניתן להעריך גם את תהליך הביצוע הערכה מסכמת, קשר אישי עם המנחה

סיכום והמלצות תכנון ערכת הערכה ואמידה מבעוד מועד שילוב של הערכה מסכמת ומעצבת שילוב של הערכה איכותנית וכמותית קשר סימטרי בין המנחה לסטודנטים, נוחות שיטת ההערכה והאמידה מגוון שיטות הערכה ואמידה ויכולת בחירה ישפרו את הלמידה

וובליוגרפיה http://www.biu.ac.il/bar-e-learn/kenes/e2/hadas-e2.htm http://meital.technion.ac.il/slides/DE_using_DE.ppt http://meital.technion.ac.il/shortdesc2.html http://www.biu.ac.il/bar-e-learn/kenes_makbil2.htm http://www.biu.ac.il/bar-e-learn/mehkar_akiva.htm http://www.ascilite.org.au/ajet/ajet18/svensson.html http://www.biu.ac.il/bar-e-learn/kenes/e2/frank-e2.htm http://itech1.coe.uga.edu/~treeves/edit8350

וובליוגרפיה http://www.quiz-gen.com/flashdemo.htm http://www.bareket.com/index.asp http://shavit.shenkar.ac.il/What/what_first.html http://www.biu.ac.il/bar-e-learn/meytal_search.html http://www.educause.edu/ir/library/pdf/eqm0213.pdf http://www.unl.ac.uk/tltc/elt/elt1.htm http://www.jtap.ac.uk/reports/htm/jtap-041.html http://www.cedarlearning.com/CL/Muzio_Dissertation.pdf