מדריך

שרשרת מחשבה (CoT): טכניקות ומתי להשתמש בהן

מדריך לטכניקות שרשרת מחשבה, הבנת תהליך החשיבה של מודלי LLM, ומתי מומלץ לצוותים להימנע משימוש ב-CoT

4 דקות קריאה
EN
שרשרת מחשבה (CoT): טכניקות ומתי להשתמש בהן
מבוסס על כתבה שלn8n ↗תרגום וסיכום באמצעות מערכת חדשות בליווי AIאיך אנחנו עובדים

תקציר מנהלים

5 דברים שחשוב לדעת

  1. מחקר של Frontiers Media SA מצא כי שיעור ההזיות בטכניקת CoT עומד על 18.1% בלבד, לעומת 34.5% בשיטת Zero-shot.

  2. המאמר מפרט 5 טכניקות CoT מובילות: Zero-shot CoT, Few-shot CoT, עקביות עצמית, צעד אחורה (Step-back) וחוט מחשבה (ThoT).

  3. בשיטת Few-shot CoT מספקים למודל בין 3 ל-5 דוגמאות איכותיות הכוללות שאלות, פתרונות ושלבי ביניים לוגיים.

  4. בשיטת עקביות עצמית מופקים מספר נתיבי חשיבה והתשובה נבחרת בהצבעת רוב מתוך מדגם של 5 עד 20 הרצות.

  5. פלטפורמת n8n מאפשרת לנהל וריאציות אלו באופן ויזואלי ולשמור יומן מלא של צמד הפקודה וההשלמה בכל צומת.

בפוסט שפורסם בבלוג של n8n על ידי צוות n8n ויוליה דמיטרייבה (Yulia Dmitrievna) ב-14 באוגוסט 2026, מוסבר כיצד טכניקת הנדסת פקודות מסוג "שרשרת מחשבה" (Chain-of-Thought - CoT) מסייעת להתגבר על מגבלותיהם של מודלי שפה גדולים (LLMs). מודלים אלו מתקשים לעיתים קרובות לספק תשובות ישירות כאשר הם נדרשים לבצע משימות חשיבה מורכבות המורכבות ממספר שלבים. טכניקת CoT מספקת מענה לקושי זה על ידי הפיכת תהליך הלוגיקה של המודל לשקוף יותר, מה שמאפשר לצוותים לאתר ולתקן פלטים שגויים (debugging) ולבצע אימות של תקפות המסקנות שאליהן הגיע המודל. המאמר סוקר את טכניקות ה-CoT השונות, את אופן פעולתן, דרכי הטמעתן בתוך סביבות עבודה ובפרט בפלטפורמת n8n, ומפרט מתי נכון להשתמש בהן ומתי מומלץ להימנע מכך.

מהי שרשרת מחשבה (Chain-of-Thought)?

שרשרת מחשבה (CoT) היא שיטת הנדסת פקודות המניעה את מודל השפה הגדול לייצר רצף של שלבי חשיבה שלביים, המהווים שלבי ביניים בדרך להשגת התשובה הסופית. מטרת השיטה היא להפחית את שיעור התשובות הקטועות או הלא מדויקות מצד מודלי השפה.

באופן כללי, מודלי שפה מתוכננים לספק תשובות במרבית המקרים. עם זאת, כאשר המודלים נדרשים לענות על שאילתות מורכבות ללא גישה לתשובות באיכות גבוהה, עולה ההסתברות להיווצרות של "הזיות" (hallucinations) מצד ה-AI. טכניקת CoT מדמה את הלוגיקה האנושית באמצעות פירוק של בעיות מורכבות לחלקים קטנים וניתנים לניהול, מה שמשפר משמעותית את רמת הדיוק של התשובות המתקבלות.

הוכחה ליעילותה של השיטה מגיעה ממחקר שפורסם על ידי Frontiers Media SA. המחקר הראה כי לטכניקת ה-CoT יש את שיעור ההזיות הנמוך ביותר בהשוואה לשיטות הנחיה אחרות: 18.1% בלבד עבור CoT, בהשוואה לשיעור הזיות של 34.5% בשיטת Zero-shot (הנחיה ללא דוגמאות כלל).

דוגמה מעשית: פקודה סטנדרטית לעומת שרשרת מחשבה

כדי להבין את ההבדל המהותי בין שתי הגישות, ניתן לבחון דוגמה שבה מוצגת בעיה חשבונית פשוטה.

בפקודה סטנדרטית (Standard Prompting), השאילתה מנוסחת כך: "בחנות יש 34 כיכרות לחם. בבוקר נמכרו 10 כיכרות. אחר הצהריים התקבלה משלוח של 12 כיכרות נוספות, ולפני הסגירה נמכרו עוד 8 כיכרות. כמה כיכרות לחם נותרו בחנות?" הפלט המתקבל במקרה זה הוא ישיר: "28 כיכרות לחם." במצב זה, המודל מייצר פלט מיידי ללא כל שקיפות לגבי האופן שבו הוא חישב והגיע לתשובה זו.

לעומת זאת, בפקודת שרשרת מחשבה (CoT Prompting), נוסח השאילתה כולל הנחיה נוספת: "בחנות יש 34 כיכרות לחם. בבוקר נמכרו 10 כיכרות. אחר הצהריים התקבלה משלוח של 12 כיכרות נוספות, ולפני הסגירה נמכרו עוד 8 כיכרות. כמה כיכרות לחם נותרו בחנות? חשוב על כך שלב אחר שלב והצג את דרך העבודה שלך." הפלט המתקבל במקרה זה הוא מפורט ומציג את דרך החשיבה במלואה: "התחל עם 34 כיכרות לחם. לאחר מכירת 10 כיכרות בבוקר: 34 פחות 10 שווה 24. לאחר קבלת המשלוח של 12 כיכרות: 24 ועוד 12 שווה 36. לאחר מכירת 8 כיכרות לפני הסגירה: 36 פחות 8 שווה 28. לכן, נותרו 28 כיכרות לחם." במקרה זה, המודל עבד באופן מפורש דרך כל אחד מהשלבים על מנת להראות כיצד הוא הגיע לתוצאה הסופית.

כמו כן, המאמר מציין כי פקודות CoT מהוות את אחד המנגנונים המרכזיים מאחורי סוכני ReAct (סוכני AI המשלבים חשיבה ופעולה - Reasoning and Acting). בתבנית פעולה זו של סוכני AI, מודלי השפה מבצעים לסירוגין פעולות של חשיבה לוגית, נקיטת פעולות ספציפיות, והתבוננות בתוצאות המתקבלות מתוך כלים חיצוניים או מסדי נתונים.

חמש טכניקות נפוצות של שרשרת מחשבה (CoT)

למרות שטכניקת CoT היא כשלעצמה שיטה לשאילתות במודלי חשיבה, קיימות מספר וריאציות של השיטה. הבחירה באסטרטגיה המתאימה תלויה בסוג השאילתה ובמקרה השימוש הספציפי. ראוי לציין כי חלק ממודלי הבינה המלאכותית היוצרת (Generative AI) כבר כוללים מנגנון מובנה של שרשרת מחשבה בתוך המערכת שלהם, כדוגמת Gemini של גוגל (Google), המודלים האחרונים של Claude מבית Anthropic, ומודלים של OpenAI.

להלן השוואה ופירוט של חמש הטכניקות הנפוצות ביותר:

  1. Zero-shot CoT (שרשרת מחשבה ללא דוגמאות): צוותים טכנולוגיים משתמשים בווריאציה זו כדי להפעיל את יכולות החשיבה של המודל מבלי לספק לו דוגמאות ספציפיות מראש. במקום זאת, הם מוסיפים לפקודה הנחיות פשוטות וישירות כמו "חשוב שלב אחר שלב" (think step-by-step). שיטה זו מנצלת את יכולות החשיבה המובנות של מודל השפה. דוגמה למקרה שימוש: מפתחים משתמשים בטכניקה זו כדי לייצר הסברים למשימות איתור באגים (debugging) מורכבות או לצורך הסבר של לוגיקת אלגוריתמים.

  2. Few-shot CoT (שרשרת מחשבה עם מעט דוגמאות): בשיטה זו מספקים למודל שלושה עד חמישה דוגמאות באיכות גבוהה, הכוללות הן את השאלות והן את התשובות האידיאליות עבורן, כאשר התשובות מוצגות עם כל שלבי חשיבת הביניים הלוגיים שלהן. מודל ה-AI לומד את דפוס החשיבה המופיע בדוגמאות הללו ומחקה אותו כאשר הוא מנסה לפתור בעיות דומות או קשורות. דוגמה למקרה שימוש: אנליסטים עסקיים יכולים להשתמש בשיטה זו עבור משימות חשיבה מורכבות, כגון חישוב נקודות איזון (break-even points) או קביעת רמות ייצור אופטימליות לאחר עליית מחירים משמעותית.

  3. CoT with self-consistency (שרשרת מחשבה עם עקביות עצמית): גישה זו מייצרת נתיבי חשיבה מרובים עבור אותה הבעיה ובוחרת את התשובה הסופית באמצעות הצבעת רוב (majority vote). היא פועלת על ידי הפחתת שגיאות חד-פעמיות ומציאת ממוצע של טעויות לוגיות נקודתיות על פני מספר דגימות שנע בין 5 ל-20 דגימות. דוגמה למקרה שימוש: מערכות מיון רפואיות (Medical triage systems) יכולות להשתמש בשיטה זו כדי להבטיח שהמלצות אבחנתיות נותרות עקביות לאורך תהליכי "מחשבה" פנימיים שונים.

  4. Step-back prompting (הנחיית צעד אחורה): טכניקה זו מנחה את המערכת להפיק עקרונות ברמה גבוהה או עובדות מושגיות (conceptual facts) לפני שהיא מנסה לגשת לפתרון המשימה הספציפית עצמה. הגישה מרחיבה את הלוגיקה של המודל על ידי מתן עדיפות לתמונה הרחבה (the big picture) לפני צלילה לפרטים הקטנים ולנתונים הגולמיים. דוגמה למקרה שימוש: צוותי שיווק עשויים להשתמש בטכניקה זו כדי להגדיר הצעות ערך (value propositions) כלל-תעשייתיות לפני שהם מזהים אסטרטגיות ספציפיות להגעה אל קהל היעד שלהם.

  5. Thread-of-thought (ThoT) prompting (הנחיית חוט מחשבה): טכניקה זו עושה שימוש במניע (inducer) ספציפי כגון "הובל אותי דרך ההקשר הזה בחלקים הניתנים לניהול" (walk me through this context in manageable parts) על מנת לשמור על קו לוגי עקבי לאורך הקשר רחב. היא מכוונת את המודל לנתח מידע באמצעות שרשראות מחשבה רציפות, מה שמסייע באיתור ותיקון כשלי חשיבה בתוך דיאלוגים ארוכים וממושכים. דוגמה למקרה שימוש: נציגי תמיכה טכנית יכולים להשתמש בטכניקה זו כדי לנהל פגישות ואבחון תקלות (troubleshooting) המשתרעים על פני 10 סבבי שיחה או יותר.

ייסום שרשרת מחשבה (CoT) בפלטפורמת n8n

האופן שבו משתמשים בשרשרת מחשבה משתנה בהתאם למוצרים הספציפיים שבאמצעותם בונים ומנהלים את סוכני ה-AI. יישומים מבוססי קוד הם הגיוניים כאשר נדרשת שליטה מלאה על עלויות וזמני השהיה (latency). יחד עם זאת, פלטפורמת n8n מאפשרת לצוותים לעצב טכניקות הנחיה שונות על גבי קנבס ויזואלי (visual canvas). באופן זה, גם צוותים טכנולוגיים מאוד יכולים לבצע איטרציות ולבחון גישות שונות בשקיפות מלאה, כאשר כל השלבים גלויים לעין ואינם קבורים בתוך קוד המקור.

הפלטפורמה מאפשרת לנהל את וריאציות ה-CoT השונות – כגון zero-shot, few-shot, ו-self-consistency – באמצעות אלמנטים מובנים (native workflow primitives) מבלי להפריע או לשנות את קוד האפליקציה. הניהול מתבצע באמצעות שימוש בטבלאות נתונים (Data Tables) לצורך ניהול גרסאות של פקודות (prompt versioning) ושימוש בניתוב מותנה (conditional branching) עבור תתי-תהליכים (sub-workflows) לצורך בחירת הטכניקה המתאימה.

תהליך העבודה יכול להתחיל עם צמתים דטרמיניסטיים מסוג Basic LLM Chain לקבלת תוצאות צפויות, ולהתרחב בהמשך לצמתים מסוג Agent nodes. סוכנים אלו משתמשים בכלים חיצוניים כדי לאמת את נתיבי החשיבה שלהם מול מסדי נתונים בעולם האמיתי.

מבנה עבודה זה הוא בר-ביקורת לחלוטין (auditable) ומשאיר יומן מעקב ברור. כל הרצה של תהליך משאירה תיעוד מלא של צמד הפקודה וההשלמה (prompt/completion pair) בכל צומת, דבר המאפשר למנהלי מערכת לבדוק את שרשרת המחשבה של המודל. הצוותים יכולים לפתוח את יומני הרישום (logs) כדי לראות בדיוק היכן המודל נתקל בקושי במהלך העיבוד הפנימי שלו. תכונה זו מספקת נראות מיידית ומפורטת ומאפשרת ביקורת מלאה על כל הרצה של המערכת.

בנוסף, הצוותים יכולים לבחון את יעילות פקודות ה-CoT בהשוואה לפקודות סטנדרטיות באמצעות כלי ההערכה (evaluations) של n8n, על מנת לנטר את האמינות, הטון והדיוק של כל פלט המיוצר במערכת. ניהול ההרצות הדינמיות מתבצע באמצעות תבניות מודולריות (modular templates) וקנבס פשוט המבוסס על צמתים. n8n מתעדת באופן אוטומטי כל שלב ביניים לצורכי איתור באגים וביקורת, ומספקת את השקיפות הנדרשת כדי לבצע שיפורים ואיטרציות לאחר כל הרצה.

מתי להשתמש בשרשרת מחשבה ומתי להימנע מכך?

השימוש בשרשרת מחשבה אינו מתאים לכל שאילתה, ואין לאלץ את השימוש בה בכל תהליך עבודה. השיטה מתאימה ביותר למשימות מורכבות באמת אשר מפיקות תועלת ממעבר על פני מספר שלבים לפני הגעה לתשובה הסופית. מומלץ לחפש מקרים שבהם שלבי הביניים יכולים לזהות ולתפוס שגיאות שתשובה ישירה עלולה לפספס.

מספר קריטריונים נפוצים שבהם מומלץ להשתמש ב-CoT כוללים:

  • משימות חשבון (Arithmetic)
  • לוגיקה סמלית (Symbolic logic)
  • יצירת קוד (Code generation)
  • משימות המורכבות משלבים מצטברים (Cumulative steps)

לעומת זאת, שימוש בהנחיות CoT שלב-אחר-שלב עבור משימות פשוטות עלול לפגוע בביצועים ולהפחית את איכות הפלט. לדוגמה, משימות של חיפוש עובדות (factual lookups) דורשות תשובות מהירות ולעיתים נדירות בלבד דורשות מעבר דרך מספר שלבים.

נניח שמשתמש שואל צ'אטבוט אילו ימי חופשה מגיעים לעובדים במהלך השנה הנוכחית. דרישה מהמודל לבצע חשיבה שלב-אחר-שלב עבור משימה זו עלולה ליצור עומס מיותר על תהליך העיבוד. יתרה מכך, הדבר עלול לעודד את המודל לפקפק בעצמו ולייצר הזיות, בעוד שתשובתו המיידית והישירה הייתה יכולה להיות נכונה ומדויקת לחלוטין. מסיבה זו, יש להתאים את מורכבות הפקודה למורכבות המשימה ולדרישות הדיוק שלה.

האם זה היה שימושי לעסק שלכם?

שאלות ותשובות

שאלות נפוצות

הכתבה הוכנה באמצעות מערכת בליווי בינה מלאכותית לתרגום, סיכום ובקרות איכות אוטומטיות מתוך פרסום מקורי של n8n. קראו על תהליך העריכה שלנו. קישור למקור המקורי.

קבלו עדכוני AI שימושיים למייל

תקציר ממוקד ממערכת החדשות שלנו.

שליחת חוזים לחתימה דיגיטלית ב-n8n עם TurboDocx ו-Slack
מדריך
4 דקות
מ־n8n

שליחת חוזים לחתימה דיגיטלית ב-n8n עם TurboDocx ו-Slack

פוסט אורח בבלוג של n8n מאת ניקולס פריי, מנכ"ל TurboDocx, מציג מדריך מפורט לבניית תהליך עבודה אוטומטי המטפל בכל שלבי הפקת החוזה והחתימה עליו. התהליך משתמש ברכיב המאומת של TurboDocx וכולל סריקה של שורות ב-Excel בסטטוס Ready to send, הפקת מסמך חוזה מתבנית Word, שליחת בקשת אישור למנהל בערוץ Slack, והעברת החוזה לחתימה אלקטרונית מול הלקוח. לאחר שהלקוח חותם מכל מכשיר, קובץ ה-PDF החתום נשמר ישירות בתיקייה ייעודית ב-SharePoint, שורת הנתונים ב-Excel מתעדכנת ל-Signed והצוות מקבל הודעה ב-Slack. המדריך מפרט גם אפשרויות להחלפת הכלים במערכות CRM, טיפול בתקלות נפוצות, ומגבלות קיימות כגון תמיכה בחותם יחיד.

קרא עוד
הכרזת n8n 3.0 בטא: שינויי תשתית, אבטחה ודוח הגירה לקראת דצמבר
מוצר חדש
4 דקות
מ־n8n

הכרזת n8n 3.0 בטא: שינויי תשתית, אבטחה ודוח הגירה לקראת דצמבר

חברת n8n הודיעה על שחרור גרסת n8n 3.0.0 בטא, לקראת השקת הגרסה היציבה בתחילת דצמבר. העדכון מתמקד בשיפורי תשתית, אמינות ואבטחה, וכולל שינויים שוברים כמו הסרת מצב נתונים בינאריים בזיכרון, הרצת הפעלות ידניות על שרתי עיבוד במצב תור, קיצור ברירת המחדל של הפסקת הזמן בצומת הקוד לדקה אחת, והגבלת התקנה עצמית ל-Docker בלבד. משתמשים מגרסה 2.39 ואילך יכולים לבדוק את התאמת המערכת באמצעות דוח הגירה מובנה.

קרא עוד
ניהול מצב בסוכני AI: הבדלים בין ארכיטקטורה בעלת מצב לחסרת מצב
מדריך
4 דקות
מ־n8n

ניהול מצב בסוכני AI: הבדלים בין ארכיטקטורה בעלת מצב לחסרת מצב

בפוסט של n8n מוסבר כי state הוא המידע שסוכן AI נושא בין משימות, החל מהיסטוריית שיחה ועד לזיכרון לטווח ארוך ולפרופילי משתמשים. ההבדל בין ארכיטקטורה בעלת מצב (stateful) לארכיטקטורה חסרת מצב (stateless) מתמקד בשאלה האם המערכת משמרת נתונים מאינטראקציות קודמות או מתחילה כל בקשה כדף חלק. יישומים בעלי מצב מעניקים המשכיות אך דורשים תשתית לאחסון ולניהול מצב, בעוד יישומים חסרי מצב מפשטים חלוקת עומסים ועמידות לתקלות. מודלי LLM אינם שומרים שיחות באופן אוטומטי, ולכן סוכני AI מתנהגים באופן בעל מצב באמצעות שמירה ושליפה של נתונים מחוץ למודל. ב-n8n מוצע לשמור על הרצה חסרת מצב כברירת מחדל, ולהוסיף צומתי זיכרון לסשנים ומאגרי מצב משותפים רק היכן שנדרשת המשכיות.

קרא עוד
הכרזת n8n Agents: שילוב סוכני AI עצמאיים לצד תהליכי עבודה
מוצר חדש
4 דקות
מ־n8n

הכרזת n8n Agents: שילוב סוכני AI עצמאיים לצד תהליכי עבודה

פלטפורמת n8n הכריזה על השקת Agents (סוכנים), המאפשרים למשתמשים להגדיר מטרות בשפה חופשית ולהשאיר לסוכן לקבוע את שלבי הביצוע בעזרת מודלים, כלים ותהליכי עבודה קיימים. הסוכנים יכולים לפעול מתוך Slack, Telegram, Discord, לפי תזמון מוגדר או מתוך תהליכי עבודה באמצעות הצומת החדש Message an Agent. כל סוכן כולל ניהול זיכרון, הפעלות, כלים, מיומנויות ומנגנוני אישור אנושי לפעולות רגישות. התכונה זמינה כעת ב-Preview למשתמשי n8n Cloud ובהתקנה עצמאית.

קרא עוד

עוד כתבות שיעניינו אותך

לכל הכתבות
מדריך סיילספורס לפיתוח סוכני AI, אפליקציות וארכיטקטורת Headless
מדריך
4 דקות
מ־Salesforce Blog

מדריך סיילספורס לפיתוח סוכני AI, אפליקציות וארכיטקטורת Headless

לפי מדריך שפרסמה סיילספורס, ארגונים נדרשים להתאים את מחזורי הפיתוח לעידן הבינה המלאכותית ולפתח סוכנים ואפליקציות מבלי להתפשר על אבטחה ואיכות. המדריך מתווה תהליך עבודה מודולרי בן שישה שלבים הכולל תכנון, בנייה, בדיקה, פריסה, ניטור והרחבה, תוך שילוב עקבי של משילות ואבטחה לכל אורך הדרך. במסגרת הבנייה מוצגים כלי פיתוח שונים, בהם Vibe coding, כלי Low-code ו-No-code כגון Builder Central, לצד ניתוב מחדש של קידוד מסורתי למשימות מותאמות אישית. שלבי הבדיקה והפריסה נשענים על סביבות Sandbox, מיסוך נתונים וכלי DevOps מובנים, בעוד ששכבת Headless ופרוטוקולי MCP מאפשרים לחבר את הסוכנים למערכות ארגוניות ולנתונים מנוהלים.

קרא עוד
שליחת חוזים לחתימה דיגיטלית ב-n8n עם TurboDocx ו-Slack
מדריך
4 דקות
מ־n8n

שליחת חוזים לחתימה דיגיטלית ב-n8n עם TurboDocx ו-Slack

פוסט אורח בבלוג של n8n מאת ניקולס פריי, מנכ"ל TurboDocx, מציג מדריך מפורט לבניית תהליך עבודה אוטומטי המטפל בכל שלבי הפקת החוזה והחתימה עליו. התהליך משתמש ברכיב המאומת של TurboDocx וכולל סריקה של שורות ב-Excel בסטטוס Ready to send, הפקת מסמך חוזה מתבנית Word, שליחת בקשת אישור למנהל בערוץ Slack, והעברת החוזה לחתימה אלקטרונית מול הלקוח. לאחר שהלקוח חותם מכל מכשיר, קובץ ה-PDF החתום נשמר ישירות בתיקייה ייעודית ב-SharePoint, שורת הנתונים ב-Excel מתעדכנת ל-Signed והצוות מקבל הודעה ב-Slack. המדריך מפרט גם אפשרויות להחלפת הכלים במערכות CRM, טיפול בתקלות נפוצות, ומגבלות קיימות כגון תמיכה בחותם יחיד.

קרא עוד
ניהול עלויות מקצה לקצה ב-Amazon Bedrock: מדריך לצוותי FinOps
מדריך
5 דקות
מ־AWS Machine Learning

ניהול עלויות מקצה לקצה ב-Amazon Bedrock: מדריך לצוותי FinOps

בפוסט של מומחי AWS מוצג מודל תפעולי בן חמישה שלבים לניהול עלויות ב-Amazon Bedrock, המיועד לצוותי FinOps והנדסת פלטפורמה. המודל מתמקד בעומסי עבודה של סוכני בינה מלאכותית (agentic workloads), שבהם צריכת הטוקנים מושפעת מרמת האוטונומיה וגודל ההקשר. חמשת השלבים כוללים: שיוך עלויות לכל ישות וצוות באמצעות תגי IAM ודוחות CUR 2.0; יצירת יכולת תצפית ובקרה באמצעות רישום יומני הסקה ב-CloudWatch וב-S3 לצד מטא-דאטה מובנית; אכיפת תקציבים בשלוש רמות (התראות, שלילת הרשאות ב-IAM או חסימה סינכרונית בשער); מיטוב ברירות מחדל באמצעות שמירה במטמון (prompt caching) וניתוב מודלים חכם; והפעלת סקירת ביצועים משותפת מבוססת מדדים ברורים.

קרא עוד
אימון סוכנים ב-Multi-Turn Reinforcement Learning ב-SageMaker AI
מדריך
5 דקות
מ־AWS Machine Learning

אימון סוכנים ב-Multi-Turn Reinforcement Learning ב-SageMaker AI

מדריך טכני של מהנדסי AWS מציג את השימוש ב-Multi-Turn Reinforcement Learning (MTRL) על גבי Amazon SageMaker AI לאימון סוכני בינה מלאכותית על רצפי פעולות מרובי שלבים. באמצעות הדגמה על משחק Wordle, המאמר מפרט כיצד אימון מודל GPT-OSS-20B בעזרת סביבת Amazon Bedrock AgentCore ואלגוריתם GRPO העלה את שיעור הפתרון מ-61% ל-84% בהגדרות הגשה, בעלות של כ-339 דולר בטוקנים. המדריך כולל פירוט על ארכיטקטורת המערכת, הכנת מערך הנתונים ללא תוויות, נוסחת פונקציית התגמול המפרידה בין תוצאה לעיצוב התנהגות, והתמודדות עם תקלות תשתית ואימות במהלך האימון.

קרא עוד