בעידן שבו אינטראקציה בין בני אדם לסוכנים AI דורשת הבנת רגשות מדויקת, חוקרים מציגים מסגרת רב-סוכנית חדשנית לזיהוי רגשות רב-מודלי. המסגרת הזו הופכת כל מקודד מודליות וממיין ההיטמעות לסוכנים אוטונומיים, שמתואמים על ידי מפקח מרכזי. גישה זו מאפשרת שילוב מודולרי של מודליות חדשות, כמו תכונות אודיו דרך emotion2vec, החלפת רכיבים מיושנים ללא קושי והפחתת עומס חישובי באימון. זהו צעד משמעותי לקראת מערכות גמישות יותר בתחום HAI.
המסגרת המוצעת משתמשת בסוכנים אוטונומיים לכל מודליות: ראייה, אודיו וטקסט. כל סוכן אחראי על עיבוד המודליות שלו, והממיין משמש כסוכן קבלת החלטות משותף. לפי החוקרים, ארכיטקטורה זו מפחיתה את העלות החישובית של אימון מודלים רב-מודליים מסורתיים, שדורשים משאבים כבדים ופחות גמישים לשינויים. הדגמה ראשונית מוכיחה את היתכנותה, עם תמיכה בשלוש מודליות עיקריות.
מודלים עמוקים רב-מודליים מסורתיים מציעים דיוק גבוה בזיהוי רגשות באמצעות הבעות פנים, דיבור וטקסט, אך אימונם מורכב ומקשה על התאמה לשינויים. המסגרת החדשה פותרת זאת על ידי מבנה מודולרי, שבו ניתן להוסיף או להחליף סוכנים בקלות. זה מקדם תחזוקה נוחה יותר ומאפשר הסתגלות מהירה לצרכים חדשים, כמו שילוב תכונות אודיו מתקדמות.
בהקשר עסקי, המסגרת הזו רלוונטית במיוחד לחברות ישראליות המפתחות סוכנים וירטואליים או ממומשים. היא מאפשרת בניית מערכות זיהוי רגשות גמישות, שמתאימות לשוק הדינמי של AI. בישראל, שבה סטארט-אפים מובילים בתחום הרובוטיקה והצ'טבוטים, גישה כזו יכולה להאיץ פיתוח מוצרים תחרותיים.
המסגרת תורמת לעיצוב מודולים תפיסתיים גמישים, מדרגיים וקלים לתחזוקה לסוכנים ב-HAI. עבור מנהלי עסקים, זה אומר השקעה בטכנולוגיה שניתן להרחיב בקלות, ללא צורך באימונים כבדים חוזרים. מה תהיה ההשפעה על שירות לקוחות מבוסס AI?