נבדק ב-24.9.2026 · https://www.heise.de/
יש 1 חסמים קריטיים למציאוּת בבינה מלאכותית — תקן אותם קודם.
מטריצת סורקי בינה מלאכותית
לכל בוט: מה robots.txt שלך מתיר — ומה השרת שלך באמת מחזיר לסוכן המשתמש של הבוט. שורות מודגשות באדום: robots מתיר, אך השרת חוסם (בדרך כלל כלל WAF או הגנה מפני בוטים).
| בוט | מפעיל | robots.txt | תגובת השרת |
|---|---|---|---|
| GPTBot | OpenAI | מותר | 200 + תוכן |
| OAI-SearchBot | OpenAI | מותר | 200 + תוכן |
| ChatGPT-User | OpenAI | מותר | 200 + תוכן |
| ClaudeBot | Anthropic | מותר | 200 + תוכן |
| Claude-SearchBot | Anthropic | מותר | 200 + תוכן |
| Claude-User | Anthropic | מותר | 200 + תוכן |
| PerplexityBot | Perplexity | מותר | 200 + תוכן |
| Perplexity-User | Perplexity | מותר | 200 + תוכן |
| Google-Extended | Google (Gemini-Training) | חסום | — |
| Googlebot | Google (KI-Übersichten) | מותר (דרך User-agent: *) | 200 + תוכן |
| CCBot | Common Crawl (Trainingsdaten vieler LLMs) | חסום | 200 + תוכן |
| Bytespider | ByteDance (Doubao) | חסום | 200 + תוכן |
| Amazonbot | Amazon (Alexa/Rufus) | חסום | 200 + תוכן |
| Applebot-Extended | Apple (Intelligence-Training) | חסום | — |
| Meta-ExternalAgent | Meta (Llama/Meta AI) | חסום | 200 + תוכן |
כיצד נוצר הציון?
| בוטי חיפוש של AI חסומים ב-robots.txt | -8 |
| כותרת העמוד קצרה מדי או ארוכה מדי | -6 |
| לא בדיוק כותרת H1 אחת | -5 |
| אין llms.txt | -5 |
| אין סכמת Organization | -4 |
| אין אות מחבר או מחברוּת | -4 |
| אין קישורי sameAs | -3 |
| אין סימון FAQ או HowTo | -2 |
| תוצאה | 63 / 100 |
גישה לסורקי בינה מלאכותית
בוטי חיפוש של AI חסומים ב-robots.txt
קובץ ה-robots.txt שלך חוסם 1 בוטים שמביאים תוכן לתשובות של עוזרי AI ומנועי חיפוש: Google-Extended. כל עוד הם חסומים, האתר שלך לא יכול להופיע שם כמקור.
מה שכדאי לך לעשות: בדקו לגבי כל בוט אם החסימה מכוונת. אם רוצים רק לסרב לאימון AI, חוסמים את בוטי האימון (GPTBot, ClaudeBot, Google-Extended) ומתירים את בוטי החיפוש.
מבנה והבנה מכונתית
כותרת העמוד קצרה מדי או ארוכה מדי
אורך ה-<title> הוא 67 תווים. כ-30–60 תווים סביר: מתאר מספיק כדי לנקוב בנושא, קצר מספיק כדי שלא ייחתך.
מה שכדאי לך לעשות: כתוב כותרת תמציתית המכילה את הנושא ובמידת הצורך את המותג.
לא בדיוק כותרת H1 אחת
לעמוד יש 0 כותרות H1. H1 אחת חד-משמעית אומרת לבני אדם ולמכונות על מה העמוד בעיקרו.
מה שכדאי לך לעשות: הגדר בדיוק H1 אחת שנוקבת בנושא הראשי של העמוד. כל מה שמתחתיה מתחיל מ-H2.
אין llms.txt
בכתובת /llms.txt אין קובץ. llms.txt הוא סקירה קצרה ב-Markdown של התוכן המרכזי שלך שחלק ממערכות הבינה המלאכותית משתמשות בה להתמצאות.
מה שכדאי לך לעשות: צור /llms.txt: H1 עם השם, פסקה קצרה על ההצעה, ורשימת קישורים לעמודים המרכזיים.
# החברה שלך > תיאור במשפט אחד. ## עמודים חשובים - [מוצר](https://הדומיין-שלך.example/product): … - [מחירים](https://הדומיין-שלך.example/pricing): … - [אודות](https://הדומיין-שלך.example/about): …
אין סכמת Organization
יש JSON-LD, אך אין רשומת «Organization». מערכות בינה מלאכותית אז ממקמות את המותג שלך פחות טוב כישות נפרדת ומקשרות אותו פחות טוב למקורות חיצוניים.
מה שכדאי לך לעשות: הוסף סכמת «Organization» עם name, url, logo ו-sameAs (קישורים לפרופילים הרשמיים שלך).
אין סימון FAQ או HowTo
תוכן בפורמט שאלה-תשובה ושלב-אחר-שלב קשה יותר למערכות בינה מלאכותית לזהות כתשובה שניתן לצטט ישירות ללא סימון FAQPage או HowTo.
מה שכדאי לך לעשות: היכן שהעמוד עונה על שאלות אמיתיות או נותן הוראות, סמן אותו כ-FAQPage או HowTo (אין סימון ללא תוכן תואם נראה).
אותות אמון וישות (E-E-A-T)
אין אות מחבר או מחברוּת
לא ניתן לזהות מחבר (לא meta tag, לא rel=author ולא JSON-LD Person). עבור «ניסיון» ו«מומחיות» במובן E-E-A-T נחשבת מחברוּת נקובה שניתן לעקוב אחריה.
מה שכדאי לך לעשות: בתוכן עריכתי, נקוב בשם מחבר וקשר עמוד מחבר; סמן אותו גם כ-JSON-LD «Person».
אין קישורי sameAs
ב-JSON-LD חסר «sameAs». באמצעותו מערכות בינה מלאכותית ממפות בבירור את המותג או האדם שלך לישויות מוכרות (Wikidata, LinkedIn, מדריכי ענף).
מה שכדאי לך לעשות: הוסף «sameAs» ב-Organization או ב-Person עם כתובות ה-URL של הפרופילים הרשמיים ורשומות המדריכים שלך.
תקין (6)
- התוכן העיקרי נמצא ב-HTML ללא JavaScript.
- קיימים נתונים מובְנים (JSON-LD). — ItemList, Thing
- הוגדרה כתובת canonical.
- מפת האתר נגישה.
- זמן תגובה מהיר מהשרת.
- אין noindex — מותר לאנדקס את העמוד.
הצעדים הבאים
- בוטי חיפוש של AI חסומים ב-robots.txt. בדקו לגבי כל בוט אם החסימה מכוונת. אם רוצים רק לסרב לאימון AI, חוסמים את בוטי האימון (GPTBot, ClaudeBot, Google-Extended) ומתירים את בוטי החיפוש.
- כותרת העמוד קצרה מדי או ארוכה מדי. כתוב כותרת תמציתית המכילה את הנושא ובמידת הצורך את המותג.
- לא בדיוק כותרת H1 אחת. הגדר בדיוק H1 אחת שנוקבת בנושא הראשי של העמוד. כל מה שמתחתיה מתחיל מ-H2.
סריקה חוזרת שבועית עם התראה במייל בכל שינוי. בהכנה — הזן את הכתובת שלך.
שיטה וגבולות
נבדק ב-24.9.2026. citeglass מביא את heise.de ואת הקבצים הקשורים (robots.txt, llms.txt, sitemap.xml) דרך HTTP — פעם כדפדפן רגיל, פעם לכל סוכן משתמש של סורק בינה מלאכותית. JavaScript אינו מורץ. זמן עד הבייט הראשון: 65 מ"ש.
מה זה לא: אין מעקב אחר דירוגים או ציטוטים, אין קביעה אם מודל באמת מזכיר אותך, ואין בדיקת תוכן הנטען דרך JavaScript. תצלום מצב מנקודת מבט של כתובת IP אחת של שרת.