מחקר
5 דקות
מ־arXiv cs.AI
XpertBench למדידת בינה מלאכותית מקצועית: למה 66% זה תמרור אזהרה
**XpertBench הוא בנצ'מרק חדש שבודק אם מודלי שפה באמת מתפקדים כמו מומחים מקצועיים, והתשובה כרגע חלקית בלבד.** לפי המחקר, גם המודלים המובילים הגיעו לשיא של כ-66% הצלחה בלבד, עם ממוצע סביב 55% על פני 1,346 משימות ב-80 קטגוריות. המשמעות לעסקים בישראל ברורה: אפשר להשתמש ב-AI לניסוח, סיכום וסיווג, אבל לא לבנות עליו לבדו בתהליכים משפטיים, רפואיים או פיננסיים. הערך העסקי מגיע כשמחברים מודל שפה ל-WhatsApp Business API, ל-Zoho CRM ול-N8N בתוך תהליך עם בקרה אנושית, רובריקות איכות ומדידה שוטפת.
קרא עוד