גלאי AI למורים: שימוש הוגן בתוצאה

על מה תוצאה של גלאי יכולה להעיד, ועל מה לא

גלאי משווה טקסט לדפוסים שלמד מכתיבה של בני אדם ושל מכונות ומחזיר אות של מודל. Textumi מציג את התוצאה באחת מחמש תוויות: "נכתב בידי אדם", "בעיקר אנושי", "מעורב: אדם ו-AI", "בעיקר AI" ו"נוצר ב-AI".

כל תווית היא הערכה שנשענת על סגנון הטקסט, ולא ממצא לגבי מי שכתב אותו. "נכתב בידי אדם" אינו מאשר שאדם כתב את הטקסט, ו"מעורב" או "בעיקר AI" אינם מראים איזה חלק מהטקסט כתבה מכונה: הגלאי לא מודד את זה. אף תווית אינה ההסתברות שהתלמיד השתמש ב-AI.

לכן "נכתב בידי אדם" אינו מנקה איש מחשד, ו"נוצר ב-AI" אינו מרשיע איש.

• תוצאה יכולה לעזור להחליט אילו עבודות ראויות לקריאה איטית וקפדנית יותר משאר העבודות.
• תוצאה יכולה להפנות לקטעים שכדאי לשאול עליהם בשיחה עם התלמיד.
• תוצאה אינה יכולה לקבוע מי כתב טקסט, ואסור שתהיה הבסיס היחיד להורדת ציון או לדיווח על הפרת טוהר מידות.
• תוצאה אינה יכולה להכריע במחלוקת, כי לתלמיד אין דרך להתווכח עם אות של מודל לגופו של עניין.

גלאים טועים לשני הכיוונים: הם מסמנים כתיבה אנושית ומחמיצים כתיבת AI. בשנת 2023 OpenAI הסירה את מסווג טקסטי ה-AI שלה עצמה, בנימוק של דיוק נמוך. תוצאה של כל כלי צריך לבחון מול ראיות אחרות.

בדיקה הוגנת מתחילה מהאופן שבו התלמיד כתב

הראיה החזקה ביותר למחברות היא הדרך שבה הטקסט נוצר, והגלאי לא רואה ממנה דבר. כשעבודה מסוימת מעוררת דאגה, כדאי לעבור על הצעדים האלה לפני שמגבשים עמדה.

1. לקרוא קודם את העבודה בעצמכם ולרשום מה נראה חריג: שינוי בקול הכותב, מקורות שאינם קיימים, טענות שהקורס מעולם לא עסק בהן.
2. להשוות אותה לעבודות קודמות של אותו תלמיד, רצוי משהו שנכתב בכיתה: אוצר מילים, אורך משפטים, טעויות אופייניות.
3. לבקש טיוטות, רשימות ומתווה. מסמך שנכתב בעורך מקוון שומר בדרך כלל היסטוריית גרסאות שמראה איך הטקסט גדל לאורך שעות או ימים.
4. לשוחח עם התלמיד בפרטיות ובלי האשמה. לבקש ממנו להסביר את הטיעון, לתאר איך מצא מקור מסוים, או לומר למה בנה פסקה כפי שבנה.
5. לתעד מה בדקתם ומה מצאתם, כולל כל מה שפועל לטובת התלמיד.
6. לפעול לפי הנוהל של המוסד ולהחליט על סמך כל הראיות יחד, ולא על סמך תוצאה אחת של גלאי.

תלמיד שיכול להציג טיוטות ולדון בעבודה לפרטיה ענה על השאלה שהגלאי העלה. אם אינו יכול, ייתכן שתתקיים שיחה מסוג אחר, אבל המסקנה תישען אז על השיחה ועל הטיוטות, ולא על התווית של הגלאי.

תשובות קצרות וכותבים בשפה שאינה שפת אמם דורשים זהירות יתרה

טקסט קצר נותן לגלאי מעט מאוד חומר. Textumi מקבל טקסטים מ-5 מילים, אבל מתחת ל-50 מילים הוא מציג "אין מספיק טקסט להערכה" במקום תווית, וגם תשובה ארוכה מעט יותר מקבלת תוצאה פחות אמינה מחיבור שלם. Textumi בודק בנפרד רק פסקאות של 50 מילים ומעלה, כך שתשובה בת פסקה אחת או תגובה בפורום דיון דלות מכדי לשפוט אותן בגלאי.

תלמידים שכותבים בשפה שנייה מסומנים בטעות לעתים קרובות יותר. בשנת 2023 מצאו חוקרים מסטנפורד שגלאים סימנו חיבורים באנגלית של כותבים שאינם דוברי אנגלית כשפת אם כנוצרים על ידי AI לעתים קרובות יותר מחיבורים של דוברי אנגלית ילידים. אוצר מילים מצומצם ומשפטים סדירים נראים צפויים למודל, ואת הצפיות הזו גלאי קורא ככתיבה של מכונה.

כדאי לקרוא תוצאות באותה זהירות גם בסוגות תבניתיות, כמו דוחות מעבדה וסיכומים, ובטקסטים שתורגמו, נערכו בכבדות או נכתבו בחלקם בעזרת מישהו אחר.

גם השפה חשובה. הגלאים של Textumi לאנגלית ולאוקראינית נבדקו בצורה היסודית ביותר. שמונה-עשרה השפות האחרות אומנו ונבדקו על מגוון טקסטים מצומצם יותר. בצרפתית, בווייטנאמית, בטורקית, באינדונזית ובהולנדית הגלאים מחמיצים לעתים קרובות טקסטי AI בסוגות אחרות, ולכן תוצאה של "נכתב בידי אדם" או "בעיקר אנושי" בשפות האלה אומרת מעט.

מדיניות קורס קצרה בנושא AI וגלאים

לתלמידים קל יותר כשהם מכירים את הכללים לפני המטלה הראשונה. עמוד אחד, בהתאם לתקנון המוסד, יכול לכסות את הנקודות האלה.

• אילו שימושים ב-AI מותרים בקורס, אילו אסורים, והאם התשובה משתנה ממטלה למטלה.
• איך התלמידים צריכים לגלות עזרה מותרת של AI, למשל בהערה קצרה בסוף העבודה.
• בקשה לשמור טיוטות, רשימות והיסטוריית גרסאות עד לפרסום הציונים הסופיים, עם הסבר למה מבקשים זאת.
• שייתכן שייעשה שימוש בגלאי, שהתוצאה שלו היא אות ולא הוכחה, ושאף עונש לא יתבסס עליה לבדה.
• מה קורה אחרי סימון: שיחה בפרטיות, עיון בטיוטות, והליך רשמי רק אם החשש נשאר בעינו.
• איך תלמיד יכול להעלות חשש או לערער אם הוא סבור שסומן בטעות.

איך בודקים טקסט ב-Textumi

1. מתחברים לחשבון Textumi, פותחים את סביבת העבודה ובוחרים בגלאי AI.
2. מדביקים את הטקסט, או מייבאים קובץ DOCX, PDF, ODT, RTF, TXT או MD בגודל של עד 10 MB. אפשר לזהות טקסט מצילום מסך או מתמונה בפורמט PNG או JPEG, אבל כדאי לעבור עליו לפני הבדיקה.
3. משאירים את השפה על זיהוי אוטומטי, או בוחרים אותה בעצמכם אם הטקסט קצר או מעורב.
4. בוחרים "ניתוח טקסט". בדיקה אחת מקבלת עד 12,000 תווים, ולכן עבודה ארוכה בודקים בחלקים.
5. מסתכלים על התווית לצד המקור ועל הפסקאות המודגשות. בטקסט ארוך ההדגשות אינן מכסות כל פסקה.

הגלאי הוא פיתוח של Textumi עצמו: בנינו וכיווננו את המודלים שלו, והבדיקות רצות בשרתים שלנו בלי שהטקסט עובר לספק AI חיצוני. אפשר להשתמש בו בסביבת העבודה באתר, באפליקציה ל-macOS במסלולים אישי ומקצועי, או דרך המחבר של Textumi ישירות בשיחה עם עוזר ה-AI. אנחנו ממשיכים לשפר את הגלאי ומוסיפים באופן קבוע כלים שמקלים על העבודה היומיומית איתו.

כמה מילים אפשר לבדוק תלוי במסלול; עמוד המחירים מפרט את כל המכסות. במסלולים אישי ומקצועי התוצאות נשמרות בהיסטוריה פרטית למשך 30 יום, ואפשר למחוק אותן קודם. במסלולים ללא היסטוריה אפשר לפתוח תוצאה במשך כשעה אחרי שהיא מוכנה; אחר כך היא כבר לא זמינה לכם, והיא נמחקת תוך 7 ימים.

לגלאי ה-AIהשוואת המסלוליםלמדיניות הפרטיות