בעולם שבו מודלי שפה גדולים (LLM) הפכו לחלק בלתי נפרד מעבודתם של מנהלי עסקים בישראל, הזיות – תפוקות שגויות עובדתית אך משכנעות לכאורה – מעלות שאלות קריטיות על אמון. מחקר איכותני חדש שפורסם ב-arXiv, עם 192 משתתפים, בוחן כיצד הזיות כאלה משפיעות על אמון המשתמשים ועל אינטראקציה עם ה-LLM. הממצאים מראים כי הזיות אינן גורמות לחוסר אמון מוחלט, אלא לכיול אמון רגיש להקשר. זהו תובנה חשובה לעסקים המשלבים AI בכלים יומיומיים. (72 מילים)
המחקר, שכותרתו 'כיול אמון בהתמודדות עם הזיות LLM: מחקר איכותני', מגדיר הזיות כתפוקות LLM שגויות אך נשמעות אמיתיות. לפי הממצאים, משתמשים מפעילים כיול אמון דינמי, בהשראת מודל כיול האמון של לי וסי ואפרוגה ואחרים. גורמי אמון הקשורים למשתמש כוללים ציפיות, ניסיון קודם, מומחיות מקצועית וידע בתחום. בנוסף, זוהתה אינטואיציה כגורם חדש חשוב לזיהוי הזיות. גורמים אלה מאפשרים למשתמשים להתאים את רמת האמון למצב הספציפי. (98 מילים)
גורמים הקשריים משפיעים אף הם באופן משמעותי. המחקר מאשר כי סיכון נתפס וחשיבות ההחלטה הם קריטיים. לדוגמה, בהקשרים בסיכון נמוך, משתמשים נוטים לסמוך יותר למרות הזיות, בעוד שבתהליכי קבלת החלטות קריטיות, הם הופכים ספקנים יותר. המחקר מאמת את תהליך כיול האמון הרקורסיבי שהציע בלובאום, ומשלב את האינטואיציה כגורם משתמשי חדש. זה מחזק את ההבנה כי אמון ב-LLM אינו סטטי אלא מתפתח. (92 מילים)
לעסקים ישראלים, הממצאים רלוונטיים במיוחד. חברות המשתמשות בכלי AI כמו ChatGPT או דומיו חייבות לשקול גורמי אמון אלה בעת הטמעה. לדוגמה, בהכשרות עובדים, יש להדגיש פיתוח אינטואיציה לזיהוי הזיות ולכיול אמון בהתאם לסיכונים. בהשוואה לכלים מסורתיים, LLM מציעים יתרונות אך דורשים גישה מודעת יותר. המחקר מדגיש את הצורך בשילוב בין טכנולוגיה לאוריינות AI אצל משתמשים. (85 מילים)
על בסיס הממצאים, החוקרים מציעים המלצות מעשיות לשימוש אחראי ב-LLM: עידוד שיקוף עצמי, בניית ניסיון הדרגתי והתאמה להקשר. לעסקים, זה אומר לבנות פרוטוקולים שמכיילים אמון בהתאם לגורמים אלה. השאלה המעשית: כיצד תיישמו זאת בכלי ה-AI שלכם היום? (68 מילים)