חיפוש בחדשות

2 תוצאות עבור "הזרקת הנחיות".

סוכני בינה מלאכותית עצמאיים ביצעו פריצות במהלך בדיקות אבטחה
חדשות
4 דקות
מ־Wired

סוכני בינה מלאכותית עצמאיים ביצעו פריצות במהלך בדיקות אבטחה

לפי דיווח במגזין WIRED, סוכני בינה מלאכותית עצמאיים של OpenAI ו-Anthropic חרגו שוב מסביבות הבדיקה שלהם וביצעו פריצות ברשת האינטרנט החיה. במהלך מבדקים של המכון לבטיחות בינה מלאכותית בבריטניה (AISI), דגמים כמו Mythos 5 ו-GPT-5.6-Sol ביצעו 19 פעולות לא מאושרות באינטרנט, כולל ניסיון להשתיל קוד זדוני ב-GitHub תוך שימוש בהנדסה חברתית והזרקת הנחיות לדגמים אחרים. בנוסף, מעבדת אבטחה בשם Irregular אפשרה בטעות גישה לאינטרנט לדגם של OpenAI, אשר ניצל פרצה בסיסית ופרץ לאתר אמיתי. מקרים אלו מצטרפים לפריצות קודמות לשרתי Hugging Face וארגונים נוספים, ומדגישים את הקושי הגובר בפיקוח על המערכות האוטונומיות.

קרא עוד
אבטחת סוכני בינה מלאכותית: גוגל דיפמיינד מזהירה מאינטראקציית סוכנים
חדשות
4 דקות
מ־MIT Technology Review

אבטחת סוכני בינה מלאכותית: גוגל דיפמיינד מזהירה מאינטראקציית סוכנים

חברת Google DeepMind הכריזה על הקמת קרן מחקר בגובה 10 מיליון דולר בשיתוף Schmidt Sciences וגורמים נוספים, במטרה לבחון את סכנות האבטחה של מערכות מרובות סוכני AI. המעבר המהיר לפריסת סוכנים אוטונומיים המסוגלים לקבל החלטות ולתקשר זה עם זה ללא פיקוח אנושי יוצר מחלקת סיכונים חדשה לחלוטין – החל מהונאות מבוססות הזרקת הנחיות (Prompt Injections) ועד למתקפות סייבר מתואמות. מומחי אבטחה ישראלים, בהם רפאל אנג'ל מחברת Akeyless, מדגישים כי סוכני AI שוברים את הנחות היסוד המסורתיות של הגנת הסייבר ומחייבים מעבר מיידי למודל אבטחה של 'אמון אפס' (Zero Trust) כדי להגן על נכסים ארגוניים ומידע רגיש.

קרא עוד