Kontrollitud 24.9.2026 · https://www.heise.de/
Tehisintellekti leitavusele on 1 kriitilist takistust — paranda need esimesena.
Tehisintellekti robotite maatriks
Iga roboti kohta: mida lubab sinu robots.txt — ja mida server roboti kasutajaagendile tegelikult tagastab. Punaselt esile tõstetud read: robots lubab, kuid server blokeerib (tavaliselt WAF-i või robotikaitse reegel).
| Robot | Käitaja | robots.txt | Serveri vastus |
|---|---|---|---|
| GPTBot | OpenAI | lubatud | 200 + sisu |
| OAI-SearchBot | OpenAI | lubatud | 200 + sisu |
| ChatGPT-User | OpenAI | lubatud | 200 + sisu |
| ClaudeBot | Anthropic | lubatud | 200 + sisu |
| Claude-SearchBot | Anthropic | lubatud | 200 + sisu |
| Claude-User | Anthropic | lubatud | 200 + sisu |
| PerplexityBot | Perplexity | lubatud | 200 + sisu |
| Perplexity-User | Perplexity | lubatud | 200 + sisu |
| Google-Extended | Google (Gemini-Training) | blokeeritud | — |
| Googlebot | Google (KI-Übersichten) | lubatud (reegli User-agent: * kaudu) | 200 + sisu |
| CCBot | Common Crawl (Trainingsdaten vieler LLMs) | blokeeritud | 200 + sisu |
| Bytespider | ByteDance (Doubao) | blokeeritud | 200 + sisu |
| Amazonbot | Amazon (Alexa/Rufus) | blokeeritud | 200 + sisu |
| Applebot-Extended | Apple (Intelligence-Training) | blokeeritud | — |
| Meta-ExternalAgent | Meta (Llama/Meta AI) | blokeeritud | 200 + sisu |
Kuidas hinne kujuneb?
| Tehisintellekti otsingubotid on robots.txt-s blokeeritud | -8 |
| Lehe pealkiri liiga lühike või liiga pikk | -6 |
| Mitte täpselt üks H1-pealkiri | -5 |
| llms.txt puudub | -5 |
| Organization skeem puudub | -4 |
| Autori- või autorsuse signaal puudub | -4 |
| sameAs-ühendused puuduvad | -3 |
| FAQ- või HowTo-märgistus puudub | -2 |
| Tulemus | 63 / 100 |
Juurdepääs tehisintellekti robotitele
Tehisintellekti otsingubotid on robots.txt-s blokeeritud
Sinu robots.txt blokeerib 1 botti, mis toovad sisu tehisintellekti assistentide ja otsingumootorite vastuste jaoks: Google-Extended. Kuni need on blokeeritud, ei saa su sait seal allikana ilmuda.
Seda peaksid tegema: Kontrolli iga boti puhul, kas blokeering on tahtlik. Kui soovid välistada ainult tehisintellekti treenimise, blokeeri treeningbotid (GPTBot, ClaudeBot, Google-Extended) ja luba otsingubotid.
Struktuur ja masinloetavus
Lehe pealkiri liiga lühike või liiga pikk
<title> on 67 tähemärki pikk. Mõistlik on umbes 30–60 tähemärki: piisavalt kirjeldav, et nimetada teema, piisavalt lühike, et mitte ära lõikuda.
Seda peaksid tegema: Kirjuta kokkuvõtlik pealkiri, mis sisaldab teemat ja vajaduse korral kaubamärki.
Mitte täpselt üks H1-pealkiri
Lehel on 0 H1-pealkirja. Üks ühemõtteline H1 ütleb inimestele ja masinatele, millest leht eelkõige räägib.
Seda peaksid tegema: Sea täpselt üks H1, mis nimetab lehe põhiteema. Kõik selle all algab H2-st.
llms.txt puudub
Aadressil /llms.txt ei ole faili. llms.txt on sinu põhisisu lühike Markdown-ülevaade, mida mõned tehisintellekti süsteemid kasutavad orienteerumiseks.
Seda peaksid tegema: Loo /llms.txt: H1 nimega, lühike lõik pakkumise kohta ja linkide loend kesksetele lehtedele.
# Sinu ettevõte > Kirjeldus ühe lausega. ## Olulised lehed - [Toode](https://sinu-domeen.ee/toode): … - [Hinnad](https://sinu-domeen.ee/hinnad): … - [Meist](https://sinu-domeen.ee/meist): …
Organization skeem puudub
JSON-LD on olemas, kuid „Organization“ kirje puudub. Tehisintellekti süsteemid paigutavad siis sinu kaubamärki halvemini eraldi olemina ja seovad seda halvemini väliste allikatega.
Seda peaksid tegema: Lisa „Organization“ skeem väljadega name, url, logo ja sameAs (lingid sinu ametlikele profiilidele).
FAQ- või HowTo-märgistus puudub
Küsimus-vastus ja samm-sammult sisu on tehisintellekti süsteemidel ilma FAQPage- või HowTo-märgistuseta raskem ära tunda otse tsiteeritava vastusena.
Seda peaksid tegema: Kus leht vastab tegelikele küsimustele või annab juhiseid, märgista see FAQPage-i või HowTo-na (märgistust ilma nähtavalt vastava sisuta ei tohi kasutada).
Usaldus- ja olemisignaalid (E-E-A-T)
Autori- või autorsuse signaal puudub
Autorit ei ole tuvastatav (ei meta-silti, rel=author ega JSON-LD Person). „Kogemuse“ ja „asjatundlikkuse“ jaoks E-E-A-T mõttes loeb nimetatud, jälgitav autorsus.
Seda peaksid tegema: Toimetusliku sisu puhul nimeta autor nimeliselt ja lingi autorileht; märgista ta ka JSON-LD-s kui „Person“.
sameAs-ühendused puuduvad
JSON-LD-st puudub „sameAs“. Sellega seovad tehisintellekti süsteemid sinu kaubamärgi või isiku selgelt tuntud olemitega (Wikidata, LinkedIn, valdkonna kataloogid).
Seda peaksid tegema: Lisa „sameAs“ Organizationi või Personi juurde oma ametlike profiilide ja kataloogikannete URL-idega.
Korras (6)
- Põhisisu on HTML-is ilma JavaScriptita.
- Struktureeritud andmed (JSON-LD) on olemas. — ItemList, Thing
- Canonical URL on määratud.
- Sitemap on kättesaadav.
- Kiire serveri vastuseaeg.
- Noindex puudub — lehte tohib indekseerida.
Järgmised sammud
- Tehisintellekti otsingubotid on robots.txt-s blokeeritud. Kontrolli iga boti puhul, kas blokeering on tahtlik. Kui soovid välistada ainult tehisintellekti treenimise, blokeeri treeningbotid (GPTBot, ClaudeBot, Google-Extended) ja luba otsingubotid.
- Lehe pealkiri liiga lühike või liiga pikk. Kirjuta kokkuvõtlik pealkiri, mis sisaldab teemat ja vajaduse korral kaubamärki.
- Mitte täpselt üks H1-pealkiri. Sea täpselt üks H1, mis nimetab lehe põhiteema. Kõik selle all algab H2-st.
Iganädalane uuesti skannimine e-kirja hoiatusega iga muudatuse korral. Ettevalmistamisel — sisesta oma aadress.
Meetod ja piirid
Kontrollitud 24.9.2026. citeglass laadib heise.de ja sellega seotud failid (robots.txt, llms.txt, sitemap.xml) HTTP kaudu — üks kord tavalise brauserina, üks kord iga tehisintellekti roboti kasutajaagendi kohta. JavaScripti ei käivitata. Aeg esimese baidini: 65 ms.
Mis see ei ole: Ei jälgi positsioone ega tsiteeringuid, ei väida, kas mudel sind tegelikult nimetab, ega kontrolli JavaScriptiga laaditud sisu. Hetketõmmis ühe serveri IP vaatenurgast.