בעולם של מערכות מבוזרות מורכבות, לוגי המערכת הם המפתח לניטור כשלים והתנהגות חריגה. שיטות מסורתיות לניתוח לוגים, כמו מבוססות תבניות או רצפים, מאבדות מידע סמנטי חשוב ומתקשות בדפוסים מעורפלים. כדי לפתור זאת, מציגים החוקרים את EnrichLog – מסגרת זיהוי חריגות מבוססת כניסות ללא צורך באימון, שמעשירה כניסות לוג גולמיות בידע ספציפי לקורפוס ולדוגמה. השיטה משלבת מידע הקשרי, כולל דוגמאות היסטוריות והסקות מהקורפוס, לזיהוי מדויק ומפורש יותר. לפי המחקר, EnrichLog משתמשת ביצירת תוכן מועשרת חיפוש (RAG) כדי לשלב ידע רלוונטי ללא אימון מחדש.
EnrichLog פועלת על בסיס כניסה בודדת ומעשירה אותה בשני סוגי ידע: ידע ספציפי לקורפוס, שמבוסס על ניתוח כלל הלוגים באוסף, וידע ספציפי לדוגמה, שמתמקד בהקשר ההיסטורי של הכניסה הספציפית. גישה זו מאפשרת התמודדות טובה יותר עם לוגים מעורפלים, ששיטות קודמות נכשלות בהן. השיטה לוקחת דוגמאות דומות מהעבר ומשלבת הסברים מהקורפוס כולו, מה שמשפר את הביטחון של המודל ומדויקות הזיהוי. אין צורך באימון מראש, מה שהופך אותה ליעילה במיוחד ליישומים מעשיים.
החוקרים בדקו את EnrichLog על ארבעה מערכי נתונים גדולים של לוגי מערכת, והשוו אותה לחמש שיטות בסיס קיימות. התוצאות מראות שיפור עקבי בביצועי זיהוי חריגות, במיוחד במקרים של כניסות מעורפלות. EnrichLog מציגה זיהוי מדויק יותר, זמן השפעה יעיל ומפורש, מה שמאפשר למפעילי מערכות להבין את ההחלטות. שילוב שני סוגי הידע מגביר את ביטחון המודל ומשפר את הדיוק הכללי.
לישראל, שבה חברות טכנולוגיה רבות מסתמכות על מערכות מבוזרות כמו ענן ואוטומציה, זיהוי תקלות בלוגים הוא קריטי להפחתת זמן השבתה. EnrichLog מציעה פתרון פשוט לשילוב במודלי שפה גדולים קיימים, ללא עלויות אימון גבוהות. בהשוואה לשיטות מסורתיות, היא שומרת על סמנטיקה מלאה ומתמודדת עם מורכבות מודרנית של לוגים.
לסיכום, EnrichLog מסמנת קפיצה קדימה בזיהוי חריגות בלוגים בעזרת LLM, עם יתרונות מעשיים ברורים. מנהלי IT בישראל צריכים לשקול אינטגרציה שלה כדי לשפר ניטור מערכות. כיצד תשפיע על התשתיות שלכם?