עלמא שלי חגגה השבוע חמש, היא עוד מעט תעלה לכיתה א'. נכנסתי לתפקיד כשהיתה בת שנה. זה מספיק זמן כדי לשאול: מה עשינו בראמ"ה כדי שהמדידה תכווין את ההוראה והלמידה שלה ושל כל ילדי ישראל?
כשאני אומר "תכווין", אני נזכר שהדבר הראשון שעשינו לפני ארבע שנים הוא לשאול מה האימפקט של ראמ"ה. זה נשמע מוזר, מדדנו את כולם, אבל לא היו לראמ"ה מדדי תוצאה משלה. לכן, הגדרנו חמישה מדדים חדשים- השפעה, שימוש, רלוונטיות, מקצועיות ו"ראמה 1" (שבודק כמה ראמה היא מקום שטוב לעבוד בו לפי אנשי הצוות שלנו). זה לא היה פשוט ארגונית לקבוע שמדידה תקפה ומהימנה היא לא תוצאה בפני עצמה אלא אמצעי להשפעה.
מכאן נשאלת השאלה מה מודדים ומתי?
הבסיס בעידן ה-AI
שני המבדקים הראשונים שעלמא תפגוש בבית הספר, כבר בכיתה א', הם מבדקי "יסודות" בחשבון ובשפה. העולם משתנה, כותרת הכנס היום מדברת על עידן "משובש", אבל הרשו לי לומר שבסוף כל המילים הגבוהות לא יכולות להחליף את הבייסיק. שפה וחשבון הם הבסיס שבלעדיו מגדל הקלפים יקרוס. את הבסיס ה-AI לא יכול להחליף. את המחיר של הפערים שנוצרו לתלמידי היסודי בקורונה - אנחנו ממשיכים לשלם עד היום.
בכיתות א' ו-ב' אין עדיין מסכים, אז פתחנו בראמ"ה מבדקים היברידיים: חפיסת קלפים שנראית כמו משחק טאקי, לצד QR שמפנה לממשק דיגיטלי. התלמיד פותר משימה מקלף פיזי, המורה מזינה באתר את התשובה, המערכת מנתחת את הנתונים ושולחת למורה בזמן אמת "סטורי" שמשקף את מצב הכיתה כולה, יחד המלצות פעולה מותאמות, בהתאם לתוצאות.
מדידה פנימית
המידע הזה נשאר אצל המורה בלבד. הוא לא מועבר למנהלת, למפקחת או למשרד. זוהי מדידה פנימית שנועדה לשרת קודם כל את המורים ולחסוך להם זמן. המדידה הזאת מבטאת אמון במורים, ביכולותיהם וברצונם לקדם את התלמידים. מעבר לכך, יש כאן תרגום של מדידה להמלצות. כלומר, באמצעות כלי דיגיטלי נגיש וחפיסת קלפים פשוטה ומזמינה התחלנו לפני כמה שנים לבנות מחדש את כלי ההערכה הפנימיים של ראמ"ה. כשבוחנים השפעה של מדידה חשובה הדרך לא פחות מאשר מושא המדידה: אמון במורה, הכוונה לפעולה וכלי שחוסך זמן - מייצרים ערך למורה שעושה את העבודה החשובה ביותר במערכת.
בשנה שעברה עשתה ראמ"ה כ900 אלף הערכות פנימיות. שני שליש מתוכם⅔ בדיגיטל. כלומר, ראמ"ה ביצעה לראשונה פי שלושה יותר מבדקים פנימיים ממבחנים חיצוניים. זוהי אבן דרך אסטרטגית בראמ"ה: המעבר ממדידה חיצונית שתמיד תהיה מאיימת, למדידה פנימית שעוזרת למורה.
המדידה הפנימית, של המורה ועבור המורה, נותנת מענה למגבלה הגדולה ביותר שיש בעיני למדידה היום: הרגע שבו היא הופכת למאיימת ואז החשש מהשלכותיה גדול מהערך שמקבלים ממנה. לכן הכלי הפנימי הזה חשוב לא פחות ממבחני המיצ"ב החיצוניים.
המבחנים החיצוניים: תמיכה או איום?
כשהילדה שלי תגיע לכיתה ד', היא תפגוש לראשונה את המבחן הסטנדרטי החיצוני הראשון בשפת אם. כל התלמידים בישראל עוברים את המבחן הזה, מתוך הבנה שקריאה היא הדבר הכי חשוב שאנחנו מצפים מהתלמיד לרכוש בשנים האלה. בניגוד לעבר, אין יותר בחינה אחת לשלוש שנים, דבר שייצר את התופעה של "שכבות מיצ"ב", אלא כולם נבחנים. כמו כן, לא קיימת עוד הסטת משאבים לשכבה מסוימת בשנה מסוימת או "טבלאות ליגה". במקום הציונים שפורסמו בעבר, התוצאה היום משקפת את מצב הכיתה בחמש קטגוריות מרכזיות לצד חוזקות וחולשות בכל אחד מהתחומים שנבחנו.
ועדיין, מבחן חיצוני שמתפרסם ומסווג את בית הספר לאחת מחמש קטגוריות המשקפות הצלחה או כישלון הוא אירוע עתיר סיכון. זוהי מגבלה מרכזית שאנו מתמודדים איתה בתהליכי המדידה עצמם: מדידה שהופכת למאיימת כיוון שההצלחה שלי תלויה במדידה, עלולה לשבש התנהגות. מבחני המיצ"ב נעצרו ב-2019, בקואליציה נדירה של הרשויות המקומיות, ארגוני ההורים, ארגוני המורים ושר החינוך - כי הסיכון לבתי הספר היה רב מהתועלת. במצב כזה תמיד תימצא הדרך להטות את המדידה או לנסות ולהסתיר את הנתונים.
מבלי להיכנס לאירועים האחרונים ששמעתם עליהם בתקשורת, גם ברמת המדינה, כאשר נתונים נתפסים כמאיימים, הם עלולים לייצר תופעות שליליות. החרדה של בתי הספר בעשור הקודם מהמיצ"ב, הובילה לשליחת תלמידים הביתה ולאינפלציה בכמות התלמידים שנשלחו לכיתות הקראה. גם היום, מבחן עתיר סיכון, בין אם לבית ספר ובין אם לדרג ניהולי בכיר, מוביל לתופעות שליליות, שפוגעות קודם כל בתוקף של הנתונים המדווחים, אך גם ביכולתה של המדידה לקדם שינויים ולייצר השפעה.
מדידה מאוזנת יוצרת השפעה
ההשפעה תלויה באיזון בין מדידה תומכת למדידה מאיימת. לכן, למרות קריאות חוזרות ונשנות - אנחנו מתנגדים לחזור ולפרסם טבלאות הליגה. התחרות של כולם בכולם לא תרמה למדידה אפקטיבית. בית ספר הוא לא סופרמרקט ולא קבוצת כדורגל. המדידה היא חיונית, ותוצרי המדידה חייבים לשרת את המטרה: לעזור לבית הספר להשתפר, לא להעניש אותו. כאמור, בכיתה ד' עלמא וחבריה יעשו כנראה יותר הערכות פנימיות בבית בספר, שאינן מאיימות על המורה, לצד מבחן חיצוני אחד בשפה, שיהיה אחיד לכולם. באותה שנה, ייתכן ועלמא גם תידגם למבחן הבינלאומי PIRLS, שבודק כמו במבחני תנופה, את רמת האוריינות השפתית של תלמידי ד'. זה מבחן שהוא עתיר סיכון לא לבית הספר, אלא לשר החינוך ולהנהלת המשרד. כי הדיווח הוא ברמה הארצית, וההשוואה היא למדינות המתקדמות בעולם (במבחן הזה, אגב, חזרנו לרמת ההישגים שהיתה במערכת לפני כעשרים שנה).
קונים סטארטאפ ומשלבים כוחות
מכיתה ד' ועד לכיתה ו', אני מקווה שעלמא וחבריה יעברו עוד מספר הערכות פנימיות, על גבי הפלטפורמה הטכנולוגית שמיזגנו לתוך ראמ"ה. במיזם משותף עם קרנות פילנטרופיות (קרן יד הנדיב, קרן דל, קרן שוסטרמן וקומוניקטי O), העברנו אלינו סטארט אפ שלם - את הפלטפורמה להערכה פנימית שפיתחה חברת קיימא. הבנו שגוף ממשלתי שקונה טכנולוגיה באאוטסורסינג כבר לא רלוונטי לימינו. אם "Digital First" - אז הפיתוח הטכנולוגי חייב לשבת בליבת הארגון.
ההפרדה הזו בין תוכן לבין דיגיטל היא לדעתי גם אחת הבעיות הגדולות במבנה משרד החינוך היום: במקום חטיבת תוכן אחת, שמאחדת את התוכן ואת הטכנולוגיה, יש היום לפחות שלושה גופים במשרד שעוסקים בכך: האחד עוסק בשפות והומניסטיקה, השני ב-STEM והשלישי בכלים דיגיטליים. מכיוון שאי אפשר להפריד בין תוכן לבין טכנולוגיה מיזגנו אלינו לתוך ראמ"ה גוף פיתוח טכנולוגי שמשתלב באופן עמוק בתהליכי פיתוח כלי ההערכה שלנו. בהיבטי עבודת הממשלה זה היה אירוע מרתק, אבל זה עובד: יש לנו היום סטארט אפ שעובד כחלק מראמ"ה.
תודות למהלך הזה, עלמא צפויה לעבור עוד כמה מבדקים במתמטיקה, בשפות ובתקווה גם במדעים עד שתגיע לכיתה ו'. אנחנו פועלים לרצף את כל השנים הללו בכמה מבדקים פנימיים במהלך השנה, בכל אחד מהתחומים, שיתנו משוב מיידי למורה על התקדמות התלמידים. המשוב המהיר נמצא כיעיל ביותר לקידום הלמידה.
מדידה של מיומנויות המחר
בכיתה ו', בית הספר של עלמא יידגם לאחד מארבעה מבחנים - במתמטיקה, באנגלית, במדעים או בתנ"ך. בשנים האלה היא תשתתף לראשונה גם בסקרי ראמ"ה, שיבדקו מיומנויות אישיות וחברתיות, וגם סוגיות ערכיות, היחס למדינה, היחס לדגל, שירות משמעותי, מעורבות חברתית ועוד רכיבים ממסמך דמות הבוגר המשרדי.
לצד אלה, בית הספר שלה יוכל לבחור להשתתף במבחן תנופה למחר. מבחן זה בוחן מיומנויות שקשה מאוד ללכוד במבחן רגיל: חשיבה ביקורתית, אוריינות מידע, יכולת עבודה נכונה עם בינה מלאכותית, דרך האינטרנט הפתוח ובמכשיר הטלפון של התלמיד.
מה שלפני שלוש שנים היה המצאה חדשה שלנו, הפך בשנה שעברה למבחן של ממש, וגם עוגן במסגרת מושגית חדשה לקראת מחקר פיזה 2029. באופן מפתיע, הנושא האורח במבחן עוסק בנושאים דומים מאוד לאלה של "תנופה למחר". אנחנו מבקשים לבחון התמודדות עם האתגרים החדשים שקשה מאוד למדוד, וגם לא פשוט ללמד אותם בכיתה. במבחן הזה, שיקרה גם השנה בכיתות ו ובכיתות ט, אנחנו מנסים להתמודד עם המגבלה השנייה הכי משמעותית שיש עלינו - למדוד יכולות ומיומנויות חדשות, שהדרך אליהן עדיין לא סלולה (אין לנו לכך היסטוריית מדידה).
בדרך הזו יש גם הפתעות. במבחן הראשון של "תנופה למחר" לא היתה בעיה בביצוע המבחן במכשירים האישיים של התלמידים, עם גיבוי של מחשבי בית הספר. לעומת זאת, היתה בעיה בתשתיות הטכנולוגיות שלנו כמערכת. כולם נערכו אך דווקא בשל עודף מוכנות שרתי הפיירוול המשרדיים אותחלו מחדש רגע לפני המבחן - וקרסו בגלל סקריפט לא נכון ששיבש את המבחן. לאורך המבחן זכינו לשותפות עמוקה ומתמשכת של המזכירות הפדגוגית, אחד מהגופים הכי מקצועיים במשרד החינוך. בסופו של דבר, למעלה מ-1,000 בתי ספר נרשמו מיוזמתם למבחן. רבים מהם התברר כבר נמצאים שם, והשיח על מיומנויות המאה ה-21 לא זר להם.
נדרש הרבה אומץ בצידנו לצאת לדרך, והרבה אוויר כדי להתמודד עם התנגדויות ומלחמות פנימיות, אבל כשיוצאים לדרך - מגיעים למקומות נפלאים. ואני מקווה שגם עבור עלמא, המדידה תהיה דבר שמאתגר אותה ואת המורים שלה להתמקד, להתפתח ולהוביל.
אין תחליף למורים
סקרתי כאן בקצרה כיצד נראית מדידה של עידן משובש: האתגרים, הדברים החדשים שאנחנו מנסים למדוד, ואיך כל זה צריך להיראות דרך העיניים של עלמא. התחלתי ביסודות של קריאה וחשבון אשר אין להם תחליף, לא דרך בינה מלאכותית ולא דרך מיקוד במיומנויות. אסיים את דבריי במורים.
אין תחליף למורים: הבינה המלאכותית יכולה לעזור, אך לא תוכל להחליף את המורים. הם השותף הכי חשוב שלנו בראמ"ה, ואנחנו משקיעים הרבה זמן ומאמץ בלייצר הצעת ערך אמיתית למשתמש הכי חשוב במערכת - המורים. על בסיס נתוני מחקר TALIS הבינלאומי, למורים בישראל תחושת שליחות ומחויבות מהגבוהות ביותר ב-OECD. זהו נכס אדיר ואנחנו צריכים להודות על כך. כולנו מכירים את ההקרבה האישית של המורים, הזמן המושקע מסביב לשעון - כל אלו מאוד לא טריוויאלים. לא סתם ההורים מרוצים מאוד מבתי הספר של הילדים שלהם.
ההבנה שאין תחליף למורים, ושהמורים שלנו הם מהמחוייבים ביותר שיש, הובילה אותנו בשנה האחרונה לפתח לראשונה כלי הערכה פנימיים דרך מעבדות מורים. במעבדה המורים נעזרים בכלי AI שפיתחה אחת מנשות הצוות שלנו כדי לפתח טקסטים ושאלות. גם שם, רואים שגם אם נעדכן את הפרומפטים כמה שנרצה, ניתן ל-AI כמה דוגמאות עבר ללמוד מהן - לעולם לא נוכל להחליף את הידע, התבונה, ההבנה, ההכרות והרגישות של המורים שלנו.
בסופו של דבר, במונחים של חברת סטרטאפ, גם אם העולם משתנה ומתהפך, "העידן משובש" ככותרת הכנס , כדאי שמוצר המדידה שלנו (ה-Product) יכלול הצעת ערך (Value Proposition) מאוד טובה לסגמנט הכי חשוב שלנו- המורים. אם יש משהו שלמדתי בארבע השנים האלה - הוא שאם המדידה שלנו לא מייצרת ערך למורים, יש כנראה בעיה במדידה, ולא במורים.



.png)



.png)
.png)
.png)
.png)
.png)
.png)
.png)


.jpg)

.jpg)

