AnswersPublished17 sources
Cloudflare מאפשרת לחסום אימון AI בלי לוותר על נראות בחיפוש
העדכון מ־15 בספטמבר 2026 מאפשר לבעלי אתרים להמשיך לאפשר אינדוקס לחיפוש, אך לאסור על אותו זחלן מעורב להשתמש בתוכן לאימון AI — אם המפעיל עומד בתקן Accountable של Cloudflare. Cloudflare מפרידה כעת בין שלושה סוגי גישה: Search, Training ו־Agent.
פורסם על ידינערך באמצעות GPT-5.6 Terraהתמונות נוצרו באמצעות GPT Image 2
Research answer
Key takeaways
- העדכון מ־15 בספטמבר 2026 מאפשר לבעלי אתרים להמשיך לאפשר אינדוקס לחיפוש, אך לאסור על אותו זחלן מעורב להשתמש בתוכן לאימון AI — אם המפעיל עומד בתקן Accountable של Cloudflare.
- Cloudflare מפרידה כעת בין שלושה סוגי גישה: Search, Training ו־Agent. בדפים עם פרסומות בדומיינים חדשים, תעבורת Training ו־Agent נחסמת כברירת מחדל.
- לפי Cloudflare, 80% מסריקות ה־AI ב־12 החודשים שקדמו לניתוח סווגו כאימון, לעומת 18% לחיפוש ו־2% לפעולות משתמשים — נתון שמחזק את הצורך בשליטה נפרדת לפי מטרה.
AI Prompt
openai.comCreate a landscape editorial hero image for this Studio Global article: What did Cloudflare’s September 15 launch of “Disallow AI Training” and its “Accountable” designation change for website owners, including h. Article summary: Cloudflare’s September 15 update gave site owners a way to opt out of AI model training without automatically sacrificing conventional search indexing. Its new “Accountable” label distinguishes operators that honor a tra. Topic tags: general, general web, documentation, user generated. Style: premium digital editorial illustration, source-backed research mood, clean composition, high detail, modern web publication hero. Use reference image context only for broad subject, composition, and topical grounding; do not copy the exact image. Avoid: logos, brand marks, copyrighted characters, real person likenesses, fake screenshots, UI text, readable text, watermarks,
לא עוד בחירה בין חסימת AI לבין נוכחות בגוגל
ב־15 בספטמבר 2026 השיקה Cloudflare את Disallow AI Training — הגדרה שמאפשרת לבעלי אתרים להישאר זמינים לאינדוקס במנועי חיפוש, ובמקביל להודיע שזחלן מסוים אינו רשאי להשתמש בתוכן שלהם לאימון או לכוונון עדין של מודל בינה מלאכותית. לצד ההגדרה הוצג הסיווג Accountable, שנועד למפעילי זחלנים שמכבדים כבר כעת את ההעדפה הזאת או התחייבו לעשות זאת בלוח הזמנים שקבעה Cloudflare. 5
המשמעות המעשית עבור מפרסמים ובעלי אתרים: אין הכרח לחסום זחלן המזוהה עם פעילות AI באופן גורף — פעולה שעלולה לפגוע גם בחשיפה האורגנית בחיפוש.
שלוש מטרות, שלוש החלטות נפרדות
Cloudflare מחלקת את תעבורת הזחלנים לשלושה שימושים שאפשר לנהל בנפרד:
- Search (חיפוש): סריקת תוכן לצורך אינדוקס והצגתו בתוצאות חיפוש.
- Training (אימון): איסוף תוכן כדי לאמן או לכוונן מודל AI.
- Agent (סוכן): שליפת תוכן בידי מערכת AI המבצעת פעולה שביקש משתמש.
10
ההפרדה חשובה משום שאותה תשתית זחילה יכולה לשמש ליותר ממטרה אחת. בעבר, חסימת זחלן הקשור ל־AI יכלה לגרום גם לאובדן אינדוקס במנוע חיפוש. הגדרת Disallow AI Training מכוונת למקרה המדויק יותר: לאפשר גישת חיפוש, אך למנוע שימוש לצורכי אימון. 5
מהו סיווג Accountable?
Cloudflare מגדירה כ־Accountable מפעילים שיכולים להבחין בין אינדוקס לחיפוש לבין שימוש באימון — ולכבד את בחירת בעל האתר. לפי החברה, Apple, Google ו־Microsoft כבר מכבדות את ההגדרה או התחייבו לכבדה במסגרת הזמן שהוגדרה. 5
מבחינת אתר שתלוי בתנועה אורגנית, זהו ההיבט המרכזי: זחלן מעורב שעומד בתנאי הסיווג יכול להמשיך לסרוק דפים לצורכי חיפוש גם כאשר הבעלים אסר אימון. כלומר, עצם העובדה שלמפעיל יש גם שימושי AI אינה מחייבת חסימה מלאה של זחלן החיפוש שלו. 5
עם זאת, ההודעה הזמינה של Cloudflare מתארת את התקן ברמה כללית. היא אינה מספקת כאן פירוט מספיק כדי לאמת את מועדי ההטמעה של כל מפעיל, את התנהגותו של כל זחלן או את מלוא ההתחייבויות הטכניות. לכן כדאי לבעלי אתרים לבדוק את ההגדרות שלהם ואת נתוני הסריקה בפועל, ולא להניח שכל מפעיל פועל באופן זהה.
מה נשאר פתוח ומה נחסם?
ההגדרה החדשה נועדה להשאיר פתוח את האינדוקס לחיפוש עבור מפעילים מעורבים בעלי סיווג Accountable, תוך דחיית שימוש בתוכן לאימון. Cloudflare מציגה אותה במפורש כדרך להישאר באינדקס החיפוש בלי לאפשר לאותו זחלן לאמן על התוכן. 5
המקורות שסופקו אינם כוללים רשימת הרשאה וחסימה מלאה לכל זחלן. אך הם תומכים במסקנות הבאות:
- גישת חיפוש של מפעילים מתאימים בעלי סיווג Accountable יכולה להישאר זמינה כאשר אימון נחסם.
- אפשר לחסום את קטגוריות Training ו־Agent בנפרד מקטגוריית Search.
- הגדרת "חסימת כל בוטי ה־AI" עדיין זמינה למי שמעדיף עצירה זמנית או איסור גורף, אך היא פחות מדויקת משליטה לפי מטרת השימוש.
עבור אתרים שמסתמכים על SEO, זהו שינוי מהותי: אפשר לצמצם את הצורך לבחור בין התנגדות לאימון מודלים לבין הופעה בתוצאות החיפוש.
דפים עם פרסומות: ברירות המחדל של ספטמבר
Cloudflare הודיעה קודם לכן כי החל מ־15 בספטמבר 2026, בדומיינים חדשים המצטרפים לשירות, זחלני Training ו־Agent ייחסמו כברירת מחדל בדפים המציגים פרסומות. 10 המדיניות משקפת תפיסה שלפיה תוכן הממומן מפרסום עשוי להצדיק ברירת מחדל מגבילה יותר לשימושי AI.
הגישה הקודמת העלתה בעיה אפשרית: כאשר זחלן פועל בכמה מטרות, חסימה לפי קטגוריה עלולה להשפיע גם על סריקת חיפוש. מודל Disallow AI Training יחד עם Accountable נועד לפתור את ההתנגשות הזאת — להגן על תוכן נתמך־פרסום מפני אימון, בלי לוותר על אינדוקס לחיפוש במקום שבו מפעיל הזחלן מסוגל לכבד את ההפרדה. 5
המקורות אינם מתעדים במלואם כיצד הועברו דומיינים קיימים למדיניות החדשה או אילו ברירות מחדל חלו על כל סוג חשבון. בעלי דומיינים ותיקים צריכים לכן לבחון את המדיניות המוגדרת אצלם, ולא להסיק אוטומטית מברירת המחדל לדומיינים חדשים.
ומה לגבי Google-Extended, Applebot-Extended ו־NOARCHIVE?
שליטה לפי מטרה מנסה לפתור אותה בעיה שטופלה עד כה באמצעות הוראות ייעודיות למפרסמים: להפריד בין פעילות חיפוש של מפעיל לבין שימושיו ב־AI.
Cloudflare דנה במנגנוני opt-out קנייניים של Google, ובהם Google-Extended ו־nosnippet, וציינה משוב מלקוחות שלפיו מנגנונים אלה לא מנעו את כל השימושים שמפרסמים ביקשו להגביל. 22 החומר שסופק כאן אינו מאפשר לאמת באופן עצמאי את ההיקף המדויק או את ההתנהגות העדכנית של Google-Extended, Applebot-Extended או הוראת
NOARCHIVE של Bing.
המסקנה הרחבה ברורה יותר מפרטי המימוש: מנגנון opt-out ייעודי או התחייבות Accountable יכולים לאפשר הוראה בסגנון: "אפשרו אינדוקס לחיפוש, אך אל תשתמשו בדף לאימון". חסימה גורפת של זחלן אינה מספקת בהכרח את ההבחנה הזו.
למה השליטה המפורטת חשובה דווקא עכשיו
בניתוח התעבורה שלה, Cloudflare סיווגה 80% מסריקות ה־AI ב־12 החודשים הקודמים כאימון, לעומת 18% לחיפוש ו־2% בלבד לפעולות שביקשו משתמשים. החברה מציינת שהסיווג מבוסס על הצהרות מפעילים ומקורות בתעשייה. 16
החלוקה הזו מסבירה מדוע בעלי אתרים עשויים לרצות הגדרות נפרדות במקום מתג AI יחיד של "הכול או כלום": אפשר להסכים לאינדוקס בחיפוש, להתנגד להטמעה קבועה של התוכן במודל באמצעות אימון, ולקבל החלטה נפרדת לגבי גישת סוכנים בזמן אמת.
Cloudflare דיווחה גם ב־2025 כי יותר מ־2.5 מיליון אתרים בחרו לאסור לחלוטין אימון AI באמצעות יכולת robots.txt מנוהלת או כלל מנוהל לחסימת זחלני AI. 13 הפקדים שהושקו בספטמבר מציעים לאתרים האלה מסלול מדויק יותר, כאשר שמירה על נראות בחיפוש היא גם יעד חשוב.
השלב הבא: שליטה בסיכומי AI
Cloudflare מסרה כי בכוונתה להעניק למפרסמים שליטה מפורטת יותר על סיכומים שנוצרים בידי AI בתחילת 2027. 2 ההודעה הקיימת מאשרת את הכיוון, אך אינה מפרטת עדיין את עיצוב המוצר הסופי, מנגנון האכיפה או אפשרויות הבחירה המדויקות.
עד אז, הלקח התפעולי פשוט: כדאי לבחון את מדיניות Search, Training ו־Agent כשלוש החלטות נפרדות. אם נראות אורגנית חשובה לאתר, אין להניח שהגבלת AI מחייבת גם הגבלת חיפוש — במיוחד כאשר מפעיל הזחלן מסווג כ־Accountable. 5
Studio Global AI
Continue your research
This page includes a source-backed answer you can continue inside Studio Global.
People also ask
What is the short answer to "Cloudflare מאפשרת לחסום אימון AI בלי לוותר על נראות בחיפוש"?
העדכון מ־15 בספטמבר 2026 מאפשר לבעלי אתרים להמשיך לאפשר אינדוקס לחיפוש, אך לאסור על אותו זחלן מעורב להשתמש בתוכן לאימון AI — אם המפעיל עומד בתקן Accountable של Cloudflare.
What are the key points to validate first?
העדכון מ־15 בספטמבר 2026 מאפשר לבעלי אתרים להמשיך לאפשר אינדוקס לחיפוש, אך לאסור על אותו זחלן מעורב להשתמש בתוכן לאימון AI — אם המפעיל עומד בתקן Accountable של Cloudflare. Cloudflare מפרידה כעת בין שלושה סוגי גישה: Search, Training ו־Agent. בדפים עם פרסומות בדומיינים חדשים, תעבורת Training ו־Agent נחסמת כברירת מחדל.
What should I do next in practice?
לפי Cloudflare, 80% מסריקות ה־AI ב־12 החודשים שקדמו לניתוח סווגו כאימון, לעומת 18% לחיפוש ו־2% לפעולות משתמשים — נתון שמחזק את הצורך בשליטה נפרדת לפי מטרה.
Sources