לאסור אימון, לאפשר חיפוש

רוב הספקים מפרידים את סורק האימון מסורק החיפוש. כך אתם יכולים לצאת מאימון המודלים ועדיין להופיע כמקור מצוטט.

חסימת בוטי אימון

Disallow עבור: GPTBot (OpenAI), ClaudeBot (Anthropic), CCBot (Common Crawl), בנוסף לאסימונים Google-Extended ו-Applebot-Extended. אופציונלי Meta-ExternalAgent, אם אתם רוצים לצאת גם מאימון Llama.

אישור בוטי חיפוש

Allow עבור: OAI-SearchBot ו-ChatGPT-User (חיפוש ChatGPT), Claude-SearchBot ו-Claude-User (Claude), PerplexityBot ו-Perplexity-User (Perplexity), Googlebot (חיפוש Google וסקירות AI).

אזורים אפורים

לא כל ספק מפריד נקי: Common Crawl לא מכיר חיפוש, Bytespider מערבב את שניהם. וקטע טקסט יכול להגיע לסקירת AI גם אם אסרתם אימון — זה עוקב אחר אינדוקס החיפוש.

בדיקת התצורה

citeglass מראה לכל בוט בנפרד את כלל ה-robots.txt החל ואת תגובת השרת האמיתית — כך אתם רואים במבט אחד אם ההפרדה "אימון כבוי, חיפוש דלוק" באמת עובדת.

בדוק את האתר שלך

citeglass מראה תוך כ-30 שניות היכן האתר שלך אינו קריא למערכות בינה מלאכותית — בחינם וללא התחברות.

המשך לקרוא

מידע כללי, לא ייעוץ משפטי. GEO הוא תחום צעיר — המלצות עשויות להשתנות.