Iċċekkjat fil-9/23/2026 · https://rehau-termopane.ro/
Hemm 1 imblukki kritiċi għall-issibjabbiltà mill-IA — sewwihom l-ewwel.
Matriċi tar-robots tal-IA
Għal kull robot: x'jippermetti r-robots.txt tiegħek — u x'jirritorna verament is-server tiegħek lill-user agent tar-robot. Ringieli enfasizzati bl-aħmar: robots jippermettih, iżda s-server jimblukkah (normalment regola ta' WAF jew ta' protezzjoni mir-robots).
| Robot | Operatur | robots.txt | Tweġiba tas-server |
|---|---|---|---|
| GPTBot | OpenAI | mhux imsemmi | imblukkat (403 / WAF) |
| OAI-SearchBot | OpenAI | mhux imsemmi | 200 + kontenut |
| ChatGPT-User | OpenAI | mhux imsemmi | 200 + kontenut |
| ClaudeBot | Anthropic | mhux imsemmi | 200 + kontenut |
| Claude-SearchBot | Anthropic | mhux imsemmi | żball / ħin skadut |
| Claude-User | Anthropic | mhux imsemmi | 200 + kontenut |
| PerplexityBot | Perplexity | mhux imsemmi | żball / ħin skadut |
| Perplexity-User | Perplexity | mhux imsemmi | żball / ħin skadut |
| Google-Extended | Google (Gemini-Training) | mhux imsemmi | — |
| Googlebot | Google (KI-Übersichten) | mhux imsemmi | 200 + kontenut |
| CCBot | Common Crawl (Trainingsdaten vieler LLMs) | mhux imsemmi | 200 + kontenut |
| Bytespider | ByteDance (Doubao) | mhux imsemmi | 200 + kontenut |
| Amazonbot | Amazon (Alexa/Rufus) | mhux imsemmi | 200 + kontenut |
| Applebot-Extended | Apple (Intelligence-Training) | mhux imsemmi | — |
| Meta-ExternalAgent | Meta (Llama/Meta AI) | mhux imsemmi | imblukkat (403 / WAF) |
Kif jinħoloq il-punteġġ?
| Is-server jimblokka robots minkejja li robots.txt jippermettihom | -12 |
| L-ebda llms.txt | -5 |
| Ma nstab l-ebda sitemap.xml | -4 |
| Livelli ta' intestaturi jinqabżu | -3 |
| L-ebda konnessjonijiet sameAs | -3 |
| Ma nstab l-ebda robots.txt | -2 |
| L-ebda mmarkar FAQ jew HowTo | -2 |
| Riżultat | 69 / 100 |
Aċċess għar-robots tal-IA
Is-server jimblokka robots minkejja li robots.txt jippermettihom
Għal 2 robot minn OpenAI, Meta (Llama/Meta AI), robots.txt jgħid „permess“, iżda s-server iwieġeb b'403 jew b'paġna ta' protezzjoni mir-robots. Normalment regola ta' WAF, firewall jew CDN li teskludi r-robot billi tevita r-robots.txt.
Dan għandek tagħmel: Żid l-user agents u/jew il-firxiet ta' IP tar-robots tal-IA mixtieqa ma' lista ta' permessi fil-WAF / Cloudflare / firewall tiegħek. Ivverifikahom permezz ta' DNS invers, mhux biss skont l-istring tal-user agent.
Ma nstab l-ebda robots.txt
F'/robots.txt ma kienx aċċessibbli l-ebda fajl validu. Ir-robots imbagħad jassumu „kollox permess“ — jaħdem, iżda m'għandekx kontroll u lanqas sinjal ta' sitemap.
Dan għandek tagħmel: Oħloq robots.txt fid-direttorju tal-għerq, mill-inqas b'referenza għas-sitemap u r-regoli allow/disallow mixtieqa.
User-agent: * Allow: / Sitemap: https://id-dominju-tieghek.mt/sitemap.xml
Struttura u fehim mill-magna
L-ebda llms.txt
F'/llms.txt m'hemmx fajl. llms.txt huwa ħarsa ġenerali qasira f'Markdown tal-kontenut ċentrali tiegħek li ċerti sistemi tal-IA jużaw għall-orjentazzjoni.
Dan għandek tagħmel: Oħloq /llms.txt: H1 bl-isem, paragrafu qasir dwar l-offerta u lista ta' links għall-paġni ċentrali.
# Il-kumpanija tiegħek > Deskrizzjoni f'sentenza waħda. ## Paġni importanti - [Prodott](https://id-dominju-tieghek.mt/prodott): … - [Prezzijiet](https://id-dominju-tieghek.mt/prezzijiet): … - [Dwarna](https://id-dominju-tieghek.mt/dwarna): …
Livelli ta' intestaturi jinqabżu
Is-sekwenza tal-intestaturi taqbeż mill-inqas livell wieħed (eż. H2 direttament għal H4). Dan jagħmilha aktar diffiċli li l-istruttura tal-kontenut tiġi rikostruwita awtomatikament.
Dan għandek tagħmel: Uża l-livelli tal-intestaturi mingħajr lakuni u fl-ordni (H1 → H2 → H3 …).
L-ebda mmarkar FAQ jew HowTo
Il-kontenut ta' mistoqsija-tweġiba u pass pass huwa aktar diffiċli għas-sistemi tal-IA biex jagħrfuh bħala tweġiba direttament ċitabbli mingħajr immarkar FAQPage jew HowTo.
Dan għandek tagħmel: Fejn il-paġna twieġeb mistoqsijiet reali jew tagħti struzzjonijiet, immarkaha bħala FAQPage jew HowTo (l-ebda mmarkar mingħajr kontenut viżibbilment korrispondenti).
Sinjali ta' fiduċja u ta' entità (E-E-A-T)
L-ebda konnessjonijiet sameAs
Fil-JSON-LD tonqos il-„sameAs“. Biha s-sistemi tal-IA jorbtu b'mod ċar il-marka jew il-persuna tiegħek ma' entitajiet magħrufa (Wikidata, LinkedIn, direttorji tal-industrija).
Dan għandek tagħmel: Żid „sameAs“ f'Organization jew Person bl-URLs tal-profili uffiċjali tiegħek u tad-daħliet fid-direttorji.
Bażi teknika
Ma nstab l-ebda sitemap.xml
F'/sitemap.xml ma kienx aċċessibbli l-ebda sitemap XML validu u robots.txt ma jsemmi l-ebda wieħed. Sitemap jgħin lir-robots isibu l-URLs rilevanti kollha.
Dan għandek tagħmel: Iġġenera sitemap.xml bl-URLs indiċjabbli kollha u irreferi għalih f'robots.txt.
Sew (8)
- Il-kontenut prinċipali huwa fl-HTML mingħajr JavaScript.
- Hemm data strutturata (JSON-LD). — HomeAndConstructionBusiness, Organization, WebSite, ImageObject, WebPage, Person, Article, VideoObject
- L-organizzazzjoni hija mmarkata bħala JSON-LD.
- Eżattament intestatura H1 waħda.
- Hemm URL canonical stabbilit.
- It-titlu tal-paġna għandu tul raġonevoli.
- Hemm sinjal ta' awtur.
- Ħin ta' tweġiba mgħaġġel mis-server.
Il-passi li jmiss
- Is-server jimblokka robots minkejja li robots.txt jippermettihom. Żid l-user agents u/jew il-firxiet ta' IP tar-robots tal-IA mixtieqa ma' lista ta' permessi fil-WAF / Cloudflare / firewall tiegħek. Ivverifikahom permezz ta' DNS invers, mhux biss skont l-istring tal-user agent.
- L-ebda llms.txt. Oħloq /llms.txt: H1 bl-isem, paragrafu qasir dwar l-offerta u lista ta' links għall-paġni ċentrali.
- Ma nstab l-ebda sitemap.xml. Iġġenera sitemap.xml bl-URLs indiċjabbli kollha u irreferi għalih f'robots.txt.
Skennjar mill-ġdid ġimgħatni b'twissija bl-email ma' kull bidla. Fil-preparazzjoni — daħħal l-indirizz tiegħek.
Metodu u limiti
Iċċekkjat fil-9/23/2026. citeglass iniżżel rehau-termopane.ro u l-fajls relatati (robots.txt, llms.txt, sitemap.xml) permezz ta' HTTP — darba bħala browser normali, darba għal kull user agent ta' robot tal-IA. Ma jiġix imħaddem JavaScript. Ħin sal-ewwel byte: 774 ms.
X'mhuwiex dan: L-ebda traċċar ta' pożizzjonijiet jew ta' ċitazzjonijiet, l-ebda dikjarazzjoni jekk mudell isemmikx verament, u l-ebda kontroll ta' kontenut mgħobbi permezz ta' JavaScript. Ritratt tal-mument mill-perspettiva ta' IP wieħed tas-server.