מחקר

מסגרת Urania: פרטיות דיפרנציאלית לתובנות מצ'אטבוטי AI

גוגל ריסרץ' מפתחת שיטה חדשה לניתוח שימושים בצ'אטבוטים תוך שמירה קפדנית על פרטיות משתמשים – עם ערבויות מתמטיות מלאות

4 דקות קריאה
מסגרת Urania: פרטיות דיפרנציאלית לתובנות מצ'אטבוטי AI
מבוסס על כתבה שלGoogle Research ↗תרגום וסיכום באמצעות מערכת חדשות בליווי AIאיך אנחנו עובדים

תקציר מנהלים

מה חשוב לדעת

  1. מסגרת Urania משלבת DP clustering, חילוץ מילות מפתח וסיכום LLM להבטחת פרטיות מקצה לקצה.

  2. עדיפות על CLIO: ערבויות מתמטיות במקום cliffיות, עמידות בפני התקפות.

  3. מבחנים מראים מסכמים איכותיים יותר בפרטיות גבוהה, AUC 0.53 בהגנה.

  4. רלוונטי לשיפור פלטפורמות AI ואכיפת בטיחות בישראל ובכלל.

האם ניתן להבין כיצד מיליוני משתמשים מנצלים צ'אטבוטי AI כמו Gemini או ChatGPT מבלי לפגוע בפרטיותם? חוקרי גוגל ריסרץ' ענו על השאלה הזו במסגרת חדשה בשם Urania, שמאפשרת תובנות ברמה גבוהה על דפוסי שימוש – מכתיבת אימיילים ועד תכנון נסיעות – תוך ערבויות פרטיות דיפרנציאלית (DP) קפדניות. השיטה מבטיחה כי שיחה בודדת לא תשפיע יתר על המידה על התוצאות, ומספקת כלי חיוני לשיפור פלטפורמות AI.

המסגרת Urania פורסמת בכנס COLM 2025 על ידי אלכסנדר נופ ודאוגאו ליו מגוגל ריסרץ'. היא מבוססת על צינור עיבוד בשלושה שלבים: קיבוץ DP של שיחות שהומרו לווקטורים (embeddings), חילוץ מילות מפתח ב-DP באמצעות היסטוגרמות רועשות, ולבסוף סיכום LLM על בסיס מילות המפתח בלבד. השיטה משלבת תכונות DP כמו post-processing ו-composition כדי להבטיח פרטיות מקצה לקצה, ללא תלות ביכולת LLM לנקות PII באופן cliffי.

בניגוד לגישות קודמות כמו CLIO, שמסתמכות על הנחיות cliffיות ל-LLM להסרת מידע מזהה אישי, Urania מספקת ערבויות מתמטיות. מילות המפתח נבחרות משלוש שיטות: LLM מודרך, TF-IDF ב-DP או בחירה מרשימה מוגדרת מראש. הרעש בהיסטוגרמות מבטיח שרק מונחים נפוצים יבלטו, ומסתיר מונחים ייחודיים או רגישים. LLM רואה רק את מילות המפתח הללו, מה שמונע חשיפת תוכן מקורי.

השיטה נבחנה מול בסיסל ליין לא פרטי (Simple-CLIO), והראתה איזון טוב בין פרטיות לתועלת. ככל שהתקציב הפרטי (ε) נמוך יותר, כך המסכמים כלליים יותר, אך במבחנים עיוורים העדיפו שופטי LLM את המסכמים הפרטיים עד 70% מהזמן – כי הם ממוקדים ומדויקים יותר. בדיקת התקפת השתייכות (membership inference) הראתה הגנה חזקה: AUC של 0.53 (קרוב לניחוש אקראי), לעומת 0.58 בבסיסליין.

בהקשר עולמי, המסגרת רלוונטית במיוחד לפלטפורמות AI גדולות כמו גוגל, שמתמודדות עם מיליארדי שיחות יומיות. היא מאפשרת אכיפת מדיניות בטיחות ושיפור שירותים מבלי לסכן פרטיות. בישראל, שבה חברות טק כמו Mobileye ו-Wix משלבות AI, כלים כאלה יכולים לסייע בפיתוח מוצרים אמינים תוך עמידה בתקנות GDPR וחוק הגנת הפרטיות.

המסגרת מדגימה כיצד DP יכולה להתגבר על אתגרי ניתוח טקסטים גדולים. היא עמידה בפני התקפות prompt injection ומבטיחה תוצאות אמינות גם אם מילות מפתח מכילות PII. לעומת זאת, גישות cliffיות עלולות להיכשל כמודלים משתפרים.

מבט קדימה כולל התאמה לסביבות מקוונות, מנגנוני DP מתקדמים יותר ושילוב מולטי-מודלי (תמונות, וידאו). זהו צעד חשוב לבניית AI אחראי.

מה זה אומר לעסקים ישראליים? כדאי לבחון כלים כאלה כבר עכשיו כדי להפיק תובנות משימושי AI פנימיים – ולהישאר צעד אחד קדימה בתחרות.

האם זה היה שימושי לעסק שלכם?

שאלות ותשובות

שאלות נפוצות

הכתבה הוכנה באמצעות מערכת בליווי בינה מלאכותית לתרגום, סיכום ובקרות איכות אוטומטיות מתוך פרסום מקורי של Google Research. קראו על תהליך העריכה שלנו. קישור למקור המקורי.

קבלו עדכוני AI שימושיים למייל

תקציר ממוקד ממערכת החדשות שלנו.

עוד מ־Google Research

כל הכתבות מ־Google Research
גוגל מציגה מסגרת מרובת סוכנים ליצירת וידאו ארוך ועקבי
מחקר
4 דקות
מ־Google Research

גוגל מציגה מסגרת מרובת סוכנים ליצירת וידאו ארוך ועקבי

חוקרי גוגל ייל סונג וייוון סונג הציגו מסגרת מרובת סוכנים מאוחדת ליצירת נרטיבים בווידאו ארוך בעלי עקביות לאורך זמן. המערכת פועלת כשכבת תזמור על גבי המודלים Gemini ו-Veo וכוללת ארבע מסגרות עבודה: AI Video Co-Director לתזמור אסטרטגיה יצירתית באמצעות אלגוריתם Multi-Armed Bandit ושופט MLLM; מסגרת CANVAS לשמירה על זיכרון חזותי וייצוגי סביבה ודמויות; ארכיטקטורת A²RD ליצירה אוטורגרסיבית מקטע-אחר-מקטע המשלבת אינטרפולציה ואקסטרפולציה; ומסגרת VQQA לביצוע אופטימיזציית פרומפטים בלולאה סגורה באמצעות שאלות חזותיות ומשוב סמנטי. להערכת המערכות פותחו המבחנים GenAD-Bench, HardContinuityBench ו-LVBench-C.

קרא עוד
שחזור מידע הוא צוואר הבקבוק של עובדתיות במודלי שפה
מחקר
5 דקות
מ־Google Research

שחזור מידע הוא צוואר הבקבוק של עובדתיות במודלי שפה

פוסט מחקר חדש של מדעני Google Research, ניתאי קלדרון וגל יונה, מציג את מסגרת 'פרופילי הידע' ואת מדד WikiProfile המבוסס על 2,150 עובדות מוויקיפדיה. המחקר חושף כי שגיאות עובדתיות במודלי שפה מתקדמים כמו Gemini 3 ו-GPT-5 אינן נובעות מהיעדר המידע בפרמטרים (כשל קידוד), אלא מקושי של המודל לגשת אליו ולשחזר אותו באופן עצמאי (כשל שחזור). במודלי הקצה המובילים, כ-95% עד 98% מהעובדות מקודדות, אך המודלים נכשלים בשחזור ישיר של 26% עד 34% מהן. המחקר מדגים כי מנגנון חשיבה יכול לסייע בשחזור של כ-40% עד 65% מהעובדות המקודדות הללו, במיוחד במקרים של עובדות נדירות או שאלות הפוכות (קללת ההיפוך), ובכך הוא מהווה כלי יעיל לפתרון צוואר הבקבוק של השחזור.

קרא עוד
גוגל מציגה את AMIE (Video): בינה מלאכותית לייעוץ רפואי בווידאו
מחקר
4 דקות
מ־Google Research

גוגל מציגה את AMIE (Video): בינה מלאכותית לייעוץ רפואי בווידאו

חוקרי גוגל הציגו את AMIE (Video), שדרוג משמעותי למערכת הבינה המלאכותית המחקרית שלהם לשיחות ייעוץ רפואיות בזמן אמת. המערכת, המבוססת על מודל Gemini ופרויקט אסטרה (Project Astra), משתמשת בארכיטקטורה אסינכרונית מרובת סוכנים המאפשרת לה לנהל שיחה טבעית ומהירה תוך פענוח רמזים חזותיים וקוליים והנחיית בדיקות פיזיות וירטואליות. במחקר מבוקר אקראי (OSCE) שהקיף 100 תרחישים קליניים ו-300 מפגשי סימולציה עם שחקנים מקצועיים, הדגימה המערכת ביצועים קליניים המקבילים לרופאי משפחה מוסמכים. השחקנים שהשתתפו בניסוי העדיפו באופן מובהק את גרסת הווידאו על פני ממשק טקסטואלי, וציינו לטובה את רמת האמפתיה ויכולת יצירת הקשר של המערכת בהשוואה לרופאים אנושיים.

קרא עוד
גוגל מציגה את Science One Framework: פלטפורמה למחקר מדעי אוטונומי
מחקר
4 דקות
מ־Google Research

גוגל מציגה את Science One Framework: פלטפורמה למחקר מדעי אוטונומי

חוקרי Google Cloud הציגו את Science One Framework, אב-טיפוס ניסיוני למחקר מדעי אוטונומי המבוסס על בינה מלאכותית ומתוכנן למגר לחלוטין את תופעת ההזיות (hallucinations). המערכת פועלת על פי עקרון שרשרת הראיות (Chain-of-Evidence), הדורש כי כל טענה במאמר תקושר ישירות לראיה פיזית מתועדת בקוד, בניסוי או בספרות המדעית. במקביל, הוצג פרוטוקול ההערכה האוטומטי CoE Audit, הבוחן את אמינות המאמרים המיוצרים על ידי בינה מלאכותית מול קוד המקור ומזהה הפניות פיקטיביות, חוסר התאמה ושינוי ציונים. בניסויים שבוצעו, המערכת השיגה 0% הפניות פיקטיביות, עמדה בהצלחה במבחנים מורכבים כמו MLE-Bench ו-Parameter-Golf, והוכיחה כי ניתן לשלב אמינות מלאה מבלי לפגוע בביצועים המדעיים של הסוכן האוטונומי.

קרא עוד

עוד כתבות שיעניינו אותך

לכל הכתבות
מחקר סיסקו: אמון ולא טכנולוגיה מגביל את הרחבת ה-AI בארגונים
מחקר
5 דקות
מ־SiliconANGLE AI

מחקר סיסקו: אמון ולא טכנולוגיה מגביל את הרחבת ה-AI בארגונים

בטור דעה שפורסם באתר SiliconANGLE מנתח זאוס קרוואלה את ממצאי מחקר חדש שהציגה חברת סיסקו בכנס Cisco Live APJC במלבורן, שנכתב על ידי החוקר העצמאי בראד הווארת ומבוסס על נתונים מ-25 ארגונים באוסטרליה. המחקר קובע כי המגבלה על קצב אימוץ הבינה המלאכותית בארגונים אינה טכנולוגית, אלא נובעת מפערי אמון ותרבות. בעוד שארגונים רבים משקיעים משאבים ניכרים בתשתיות ובנתונים, הם נוטים להזניח את ההיבט התרבותי ואת הכשרת העובדים, מה שמוביל לשימוש פושר במערכות. בדוח מודגש הצורך באמון מכויל — הבנה מתי להסתמך על המערכת ומתי לבדוק אותה — וכן מעבר למדידת מקרים שבהם עובדים מאתגרים תוצרי AI במקום להסתפק במדידת כניסות למערכת. בנוסף, המחקר מצביע על פערי מוכנות לקראת כניסתם של סוכני AI אוטונומיים, כאשר רק מיעוט מהארגונים מפעיל בקרות עקביות על זהויות שאינן אנושיות.

קרא עוד
מחקר סיילספורס: כיצד לשמר מומחיות אנושית לצד AI סוכני
מחקר
4 דקות
מ־Salesforce Blog

מחקר סיילספורס: כיצד לשמר מומחיות אנושית לצד AI סוכני

מחקר ראשוני של צוותי הבינה המלאכותית האחראית ומחקר המוצר בסיילספורס (Salesforce) מציג פרדוקס בשימוש בבינה מלאכותית סוכנית: לצד הרחבת יכולות, הסתמכות יתר עלולה להוביל להטיית אוטומציה ולהחלשת מיומנויות קיימות. המחקר, שכלל ראיונות עם עובדים בסיילספורס ואלפי משתתפים בכנס Dreamforce, מצא כי מומחים אינם מוותרים על שיקול דעתם אלא מטמיעים ספקנות מובנית בתהליכי העבודה שלהם. החוקרים הציגו שמונה פרקטיקות לתכנון "חיכוך פורה" — מנגנונים שמחייבים מעורבות אנושית, ביקורת ובדיקות עקביות, במטרה לשמור על המומחיות האנושית במרכז.

קרא עוד
גוגל מציגה מסגרת מרובת סוכנים ליצירת וידאו ארוך ועקבי
מחקר
4 דקות
מ־Google Research

גוגל מציגה מסגרת מרובת סוכנים ליצירת וידאו ארוך ועקבי

חוקרי גוגל ייל סונג וייוון סונג הציגו מסגרת מרובת סוכנים מאוחדת ליצירת נרטיבים בווידאו ארוך בעלי עקביות לאורך זמן. המערכת פועלת כשכבת תזמור על גבי המודלים Gemini ו-Veo וכוללת ארבע מסגרות עבודה: AI Video Co-Director לתזמור אסטרטגיה יצירתית באמצעות אלגוריתם Multi-Armed Bandit ושופט MLLM; מסגרת CANVAS לשמירה על זיכרון חזותי וייצוגי סביבה ודמויות; ארכיטקטורת A²RD ליצירה אוטורגרסיבית מקטע-אחר-מקטע המשלבת אינטרפולציה ואקסטרפולציה; ומסגרת VQQA לביצוע אופטימיזציית פרומפטים בלולאה סגורה באמצעות שאלות חזותיות ומשוב סמנטי. להערכת המערכות פותחו המבחנים GenAD-Bench, HardContinuityBench ו-LVBench-C.

קרא עוד
אוסף מיומנויות סוכן פתוח מבית AWS לשיפור הסקת מסקנות בבריאות
מחקר
5 דקות
מ־AWS Machine Learning

אוסף מיומנויות סוכן פתוח מבית AWS לשיפור הסקת מסקנות בבריאות

בפוסט שפורסם ב-AWS הוצג אוסף של 38 מיומנויות סוכן (Agent Skills) בקוד פתוח ב-11 תחומי בריאות ומדעי החיים (HCLS) תחת רישיון MIT-0. המיומנויות בנויות כקובצי Markdown מובנים ומסווגות למיומנויות הסקה ולמיומנויות צינור, הניתנות להרצה על יותר מ-20 שירותים, כולל Amazon Bedrock AgentCore, AWS Strands SDK ו-Kiro CLI. הערכה השוואתית שבוצעה על 410 פרומפטים הראתה כי סוכנים המצוידים במיומנויות השיגו שיעור ניצחון של 69.5% עד 85.9% מול סוכני בסיס ללא מיומנויות, כאשר השיפור המשמעותי ביותר נמדד בממד החשיבה הביקורתית (שיעור ניצחון של 78% עד 85.1%). בנוסף, המיומנויות הפחיתו את שונות הציונים בעד 61.9%.

קרא עוד