נבדק ב-23.9.2026 · https://rehau-termopane.ro/
יש 1 חסמים קריטיים למציאוּת בבינה מלאכותית — תקן אותם קודם.
מטריצת סורקי בינה מלאכותית
לכל בוט: מה robots.txt שלך מתיר — ומה השרת שלך באמת מחזיר לסוכן המשתמש של הבוט. שורות מודגשות באדום: robots מתיר, אך השרת חוסם (בדרך כלל כלל WAF או הגנה מפני בוטים).
| בוט | מפעיל | robots.txt | תגובת השרת |
|---|---|---|---|
| GPTBot | OpenAI | לא צוין | חסום (403 / WAF) |
| OAI-SearchBot | OpenAI | לא צוין | 200 + תוכן |
| ChatGPT-User | OpenAI | לא צוין | 200 + תוכן |
| ClaudeBot | Anthropic | לא צוין | 200 + תוכן |
| Claude-SearchBot | Anthropic | לא צוין | שגיאה / פסק זמן |
| Claude-User | Anthropic | לא צוין | 200 + תוכן |
| PerplexityBot | Perplexity | לא צוין | שגיאה / פסק זמן |
| Perplexity-User | Perplexity | לא צוין | שגיאה / פסק זמן |
| Google-Extended | Google (Gemini-Training) | לא צוין | — |
| Googlebot | Google (KI-Übersichten) | לא צוין | 200 + תוכן |
| CCBot | Common Crawl (Trainingsdaten vieler LLMs) | לא צוין | 200 + תוכן |
| Bytespider | ByteDance (Doubao) | לא צוין | 200 + תוכן |
| Amazonbot | Amazon (Alexa/Rufus) | לא צוין | 200 + תוכן |
| Applebot-Extended | Apple (Intelligence-Training) | לא צוין | — |
| Meta-ExternalAgent | Meta (Llama/Meta AI) | לא צוין | חסום (403 / WAF) |
כיצד נוצר הציון?
| השרת חוסם בוטים למרות ש-robots.txt מתיר אותם | -12 |
| אין llms.txt | -5 |
| לא נמצא sitemap.xml | -4 |
| רמות כותרת מדולגות | -3 |
| אין קישורי sameAs | -3 |
| לא נמצא robots.txt | -2 |
| אין סימון FAQ או HowTo | -2 |
| תוצאה | 69 / 100 |
גישה לסורקי בינה מלאכותית
השרת חוסם בוטים למרות ש-robots.txt מתיר אותם
עבור 2 בוט(ים) מ-OpenAI, Meta (Llama/Meta AI), robots.txt אומר «מותר», אך השרת מגיב עם 403 או עם עמוד הגנה מפני בוטים. בדרך כלל כלל WAF, חומת אש או CDN שנועל בחוץ את הסורק תוך עקיפת robots.txt.
מה שכדאי לך לעשות: הוסף את סוכני המשתמש ו/או טווחי ה-IP של סורקי הבינה המלאכותית הרצויים לרשימת היתר ב-WAF / Cloudflare / חומת האש שלך. אמת אותם דרך DNS הפוך, לא רק לפי מחרוזת סוכן המשתמש.
לא נמצא robots.txt
בכתובת /robots.txt לא היה נגיש קובץ תקף. סורקים אז מניחים «הכול מותר» — עובד, אך אין לך שליטה ואין אות מפת אתר.
מה שכדאי לך לעשות: צור robots.txt בתיקיית השורש, לכל הפחות עם הפניה למפת אתר וכללי allow/disallow רצויים.
User-agent: * Allow: / Sitemap: https://הדומיין-שלך.example/sitemap.xml
מבנה והבנה מכונתית
אין llms.txt
בכתובת /llms.txt אין קובץ. llms.txt הוא סקירה קצרה ב-Markdown של התוכן המרכזי שלך שחלק ממערכות הבינה המלאכותית משתמשות בה להתמצאות.
מה שכדאי לך לעשות: צור /llms.txt: H1 עם השם, פסקה קצרה על ההצעה, ורשימת קישורים לעמודים המרכזיים.
# החברה שלך > תיאור במשפט אחד. ## עמודים חשובים - [מוצר](https://הדומיין-שלך.example/product): … - [מחירים](https://הדומיין-שלך.example/pricing): … - [אודות](https://הדומיין-שלך.example/about): …
רמות כותרת מדולגות
רצף הכותרות מדלג על רמה אחת לפחות (למשל מ-H2 ישירות ל-H4). זה מקשה על שחזור מבנה התוכן באופן אוטומטי.
מה שכדאי לך לעשות: השתמש ברמות הכותרת ללא פערים ובסדר (H1 ← H2 ← H3 …).
אין סימון FAQ או HowTo
תוכן בפורמט שאלה-תשובה ושלב-אחר-שלב קשה יותר למערכות בינה מלאכותית לזהות כתשובה שניתן לצטט ישירות ללא סימון FAQPage או HowTo.
מה שכדאי לך לעשות: היכן שהעמוד עונה על שאלות אמיתיות או נותן הוראות, סמן אותו כ-FAQPage או HowTo (אין סימון ללא תוכן תואם נראה).
אותות אמון וישות (E-E-A-T)
אין קישורי sameAs
ב-JSON-LD חסר «sameAs». באמצעותו מערכות בינה מלאכותית ממפות בבירור את המותג או האדם שלך לישויות מוכרות (Wikidata, LinkedIn, מדריכי ענף).
מה שכדאי לך לעשות: הוסף «sameAs» ב-Organization או ב-Person עם כתובות ה-URL של הפרופילים הרשמיים ורשומות המדריכים שלך.
בסיס טכני
לא נמצא sitemap.xml
בכתובת /sitemap.xml לא הייתה נגישה מפת אתר XML תקפה ו-robots.txt אינו נוקב באף אחת. מפת אתר עוזרת לסורקים למצוא את כל כתובות ה-URL הרלוונטיות.
מה שכדאי לך לעשות: צור sitemap.xml עם כל כתובות ה-URL הניתנות לאינדוקס והפנה אליו ב-robots.txt.
תקין (8)
- התוכן העיקרי נמצא ב-HTML ללא JavaScript.
- קיימים נתונים מובְנים (JSON-LD). — HomeAndConstructionBusiness, Organization, WebSite, ImageObject, WebPage, Person, Article, VideoObject
- הארגון מסומן כ-JSON-LD.
- בדיוק כותרת H1 אחת.
- הוגדרה כתובת canonical.
- לכותרת העמוד אורך סביר.
- קיים אות מחבר.
- זמן תגובה מהיר מהשרת.
הצעדים הבאים
- השרת חוסם בוטים למרות ש-robots.txt מתיר אותם. הוסף את סוכני המשתמש ו/או טווחי ה-IP של סורקי הבינה המלאכותית הרצויים לרשימת היתר ב-WAF / Cloudflare / חומת האש שלך. אמת אותם דרך DNS הפוך, לא רק לפי מחרוזת סוכן המשתמש.
- אין llms.txt. צור /llms.txt: H1 עם השם, פסקה קצרה על ההצעה, ורשימת קישורים לעמודים המרכזיים.
- לא נמצא sitemap.xml. צור sitemap.xml עם כל כתובות ה-URL הניתנות לאינדוקס והפנה אליו ב-robots.txt.
סריקה חוזרת שבועית עם התראה במייל בכל שינוי. בהכנה — הזן את הכתובת שלך.
שיטה וגבולות
נבדק ב-23.9.2026. citeglass מביא את rehau-termopane.ro ואת הקבצים הקשורים (robots.txt, llms.txt, sitemap.xml) דרך HTTP — פעם כדפדפן רגיל, פעם לכל סוכן משתמש של סורק בינה מלאכותית. JavaScript אינו מורץ. זמן עד הבייט הראשון: 774 מ"ש.
מה זה לא: אין מעקב אחר דירוגים או ציטוטים, אין קביעה אם מודל באמת מזכיר אותך, ואין בדיקת תוכן הנטען דרך JavaScript. תצלום מצב מנקודת מבט של כתובת IP אחת של שרת.