מחקר
5 דקות
מ־arXiv cs.AI
טקסונומיה גאומטרית להזיות ב-LLM: למה גלאים נכשלים בין תחומים
"הזיות" במודלי שפה גדולים אינן קטגוריה אחת: מחקר arXiv:2602.13224v1 מציע טקסונומיה גאומטרית של שלושה סוגים—אי-נאמנות להקשר, קונפבולציה (המצאת תוכן זר), ושגיאה עובדתית. הנתון שמזיז את הגבינה: גלאי אמבדינג מגיעים ל-AUROC 0.76–0.99 בתוך תחום, אבל נופלים ל-0.50 בין תחומים, והכיוונים המבדילים כמעט אורתוגונליים (דמיון קוסיני ממוצע -0.07). לעומת זאת, בקונפבולציות שנכתבו על ידי בני אדם יש “כיוון גלובלי” עם AUROC 0.96. המסקנה לעסקים בישראל, במיוחד בצ’אט שירות/מכירות ב-WhatsApp: אמבדינג יכול לעצור סטייה מהקשר, אבל טעויות עובדתיות (AUROC 0.478) דורשות אימות מול Zoho CRM/ERP דרך N8N ובקרת אדם-בלולאה.
קרא עוד