ממצאים עיקריים

• דוגמאות משפרות דרמטית את הדיוק. לדוגמה, מודל Claude 3 Haiku השיג 11% דיוק בלבד ללא דוגמאות, אך זינק ל-75% דיוק עם שלוש דוגמאות בלבד — ביצועים המשתווים למודלים גדולים בהרבה .
• 2–5 דוגמאות הוא האופטימום המחקרי. מדריכים לכתיבת פרומפטים מגדירים Few-Shot Prompting כשימוש בכ-2–5 דוגמאות, ומחקר אחד מציין ש-2–5 הוא הטווח האופטימלי האופייני .
• יותר זה לא תמיד טוב יותר. מחקר מ-arXiv זיהה תופעת "Over-Prompting", שבה יותר מדי דוגמאות דווקא פוגעות בביצועי המודל, ומאתגר את ההנחה שיותר דוגמאות תמיד מועילות .
• איכות הדוגמאות חשובה יותר מכמותן. דוגמאות מגוונות, איכותיות ומובנות יכולות להביא לתוצאות טובות יותר מאשר פשוט הוספת עוד דוגמאות, בעוד שדוגמאות לא עקביות עלולות ללמד את המודל דפוסים לא רצויים .
• במשימות הדורשות חשיבה, נסו קודם ללא דוגמאות. אל תניחו שדוגמאות תמיד נחוצות; השוו ביצועים עם 0 דוגמאות לעומת ביצועים עם דוגמאות (Zero-Shot מול Few-Shot), כי Over-Prompting עלול לפגוע בביצועים במקרים מסוימים .

המלצות מעשיות

בשורה התחתונה: השתמשו בדוגמאות, הגבילו אותן ל-2–5, והעדיפו איכות וגיוון על פני כמות . בחנו האם המודל הספציפי שלכם מרוויח מ-Few-Shot לעומת Zero-Shot, במיוחד במשימות חשיבה שבהן דוגמאות נוספות לא תמיד מועילות .

ממצאים עיקריים

• דוגמאות משפרות דרמטית את הדיוק. לדוגמה, מודל Claude 3 Haiku השיג 11% דיוק בלבד ללא דוגמאות, אך זינק ל-75% דיוק עם שלוש דוגמאות בלבד — ביצועים המשתווים למודלים גדולים בהרבה .
• 2–5 דוגמאות הוא האופטימום המחקרי. מדריכים לכתיבת פרומפטים מגדירים Few-Shot Prompting כשימוש בכ-2–5 דוגמאות, ומחקר אחד מציין ש-2–5 הוא הטווח האופטימלי האופייני .
• יותר זה לא תמיד טוב יותר. מחקר מ-arXiv זיהה תופעת "Over-Prompting", שבה יותר מדי דוגמאות דווקא פוגעות בביצועי המודל, ומאתגר את ההנחה שיותר דוגמאות תמיד מועילות .
• איכות הדוגמאות חשובה יותר מכמותן. דוגמאות מגוונות, איכותיות ומובנות יכולות להביא לתוצאות טובות יותר מאשר פשוט הוספת עוד דוגמאות, בעוד שדוגמאות לא עקביות עלולות ללמד את המודל דפוסים לא רצויים .
• במשימות הדורשות חשיבה, נסו קודם ללא דוגמאות. אל תניחו שדוגמאות תמיד נחוצות; השוו ביצועים עם 0 דוגמאות לעומת ביצועים עם דוגמאות (Zero-Shot מול Few-Shot), כי Over-Prompting עלול לפגוע בביצועים במקרים מסוימים .

המלצות מעשיות

בשורה התחתונה: השתמשו בדוגמאות, הגבילו אותן ל-2–5, והעדיפו איכות וגיוון על פני כמות . בחנו האם המודל הספציפי שלכם מרוויח מ-Few-Shot לעומת Zero-Shot, במיוחד במשימות חשיבה שבהן דוגמאות נוספות לא תמיד מועילות .