Pārbaudīts 24.09.2026. · https://www.nytimes.com/
MI atrodamībai ir 2 kritiski šķēršļi — novērsiet tos vispirms.
MI robotu matrica
Katram robotam: ko atļauj jūsu robots.txt — un ko serveris patiešām atgriež robota lietotāja aģentam. Sarkani izceltas rindas: robots to atļauj, bet serveris bloķē (parasti WAF vai aizsardzības pret robotiem noteikums).
| Robots | Operators | robots.txt | Servera atbilde |
|---|---|---|---|
| GPTBot | OpenAI | bloķēts | bloķēts (403 / WAF) |
| OAI-SearchBot | OpenAI | bloķēts | bloķēts (403 / WAF) |
| ChatGPT-User | OpenAI | bloķēts | bloķēts (403 / WAF) |
| ClaudeBot | Anthropic | bloķēts | bloķēts (403 / WAF) |
| Claude-SearchBot | Anthropic | bloķēts | bloķēts (403 / WAF) |
| Claude-User | Anthropic | bloķēts | bloķēts (403 / WAF) |
| PerplexityBot | Perplexity | bloķēts | bloķēts (403 / WAF) |
| Perplexity-User | Perplexity | bloķēts | bloķēts (403 / WAF) |
| Google-Extended | Google (Gemini-Training) | bloķēts | — |
| Googlebot | Google (KI-Übersichten) | atļauts | bloķēts (403 / WAF) |
| CCBot | Common Crawl (Trainingsdaten vieler LLMs) | bloķēts | bloķēts (403 / WAF) |
| Bytespider | ByteDance (Doubao) | bloķēts | bloķēts (403 / WAF) |
| Amazonbot | Amazon (Alexa/Rufus) | atļauts | bloķēts (403 / WAF) |
| Applebot-Extended | Apple (Intelligence-Training) | bloķēts | — |
| Meta-ExternalAgent | Meta (Llama/Meta AI) | bloķēts | bloķēts (403 / WAF) |
Kā veidojas vērtējums?
| MI meklēšanas boti ir bloķēti robots.txt | -32 |
| Serveris bloķē robotus, lai gan robots.txt tos atļauj | -12 |
| Ļoti maz teksta HTML | -10 |
| Nav strukturētu datu (JSON-LD) | -8 |
| Lapas nosaukums pārāk īss vai pārāk garš | -6 |
| Nav tieši viens H1 virsraksts | -5 |
| Meta apraksta nav vai tas neatbilst | -5 |
| Nav llms.txt | -5 |
| Nav autora vai autorības signāla | -4 |
| Nav sameAs sasaistes | -3 |
| Nav saites uz juridisko informāciju / par mums / kontaktiem | -3 |
| Nav redzama vai marķēta datuma | -3 |
| Nav canonical URL | -3 |
| Rezultāts | 1 / 100 |
Piekļuve MI robotiem
MI meklēšanas boti ir bloķēti robots.txt
Jūsu robots.txt bloķē 6 botus, kas iegūst saturu MI asistentu un meklētāju atbildēm: OAI-SearchBot, ChatGPT-User, Claude-SearchBot, Claude-User, PerplexityBot, Perplexity-User. Kamēr tie ir bloķēti, jūsu vietne tur nevar parādīties kā avots.
Lūk, kas jums būtu jādara: Katram botam pārbaudiet, vai bloķēšana ir apzināta. Ja vēlaties izslēgt tikai MI apmācību, bloķējiet apmācības botus (GPTBot, ClaudeBot, Google-Extended) un atļaujiet meklēšanas botus.
User-agent: OAI-SearchBot Allow: / User-agent: ChatGPT-User Allow: / User-agent: Claude-SearchBot Allow: / User-agent: Claude-User Allow: / User-agent: PerplexityBot Allow: / User-agent: Perplexity-User Allow: /
Serveris bloķē robotus, lai gan robots.txt tos atļauj
2 robotiem no Google (KI-Übersichten), Amazon (Alexa/Rufus) robots.txt saka „atļauts“, bet serveris atbild ar kodu 403 vai aizsardzības pret robotiem lapu. Parasti WAF, ugunsmūra vai CDN noteikums, kas izslēdz robotu, apejot robots.txt.
Lūk, kas jums būtu jādara: Pievienojiet vēlamo MI robotu lietotāja aģentus un/vai IP diapazonus atļauto sarakstam savā WAF / Cloudflare / ugunsmūrī. Pārbaudiet tos ar reverso DNS, nevis tikai pēc lietotāja aģenta virknes.
MI apmācība izslēgta
Jūsu robots.txt bloķē rāpuļprogrammas, kas vāc saturu valodas modeļu apmācībai: GPTBot, ClaudeBot, Google-Extended, CCBot, Applebot-Extended. Tas netraucē citēšanai — meklēšanas un ieguves boti, piemēram, OAI-SearchBot, PerplexityBot un Googlebot MI pārskatiem, ir atsevišķi.
Lūk, kas jums būtu jādara: Nekas nav jādara, ja izslēgšana ir apzināta. Tikai pārliecinieties, ka meklēšanas boti joprojām ir atļauti.
Saturs bez JavaScript
Ļoti maz teksta HTML
Sākotnējā HTML ir tikai aptuveni 55 rakstzīmes redzama teksta. Ar to tik tikko pietiek, lai MI sistēmas droši uztvertu lapas tēmu.
Lūk, kas jums būtu jādara: Pārliecinieties, ka faktiskais saturs pilnībā ir HTML, nevis attēlos, iframe vai ar JavaScript ielādētos blokos.
Struktūra un mašīnas saprotamība
Nav strukturētu datu (JSON-LD)
Lapa nesatur JSON-LD. Strukturēti dati palīdz MI sistēmām nepārprotami atpazīt vienības, autoru, organizāciju, datumu un lapas tipu — bez tiem viss jāuzmin no teksta.
Lūk, kas jums būtu jādara: Pievienojiet vismaz „Organization“ shēmu un lapas tipam atbilstošu (Article, Product, FAQPage …) kā JSON-LD <head>.
<script type="application/ld+json">
{"@context":"https://schema.org","@type":"Organization",
"name":"Jūsu uzņēmums","url":"https://jusu-domens.lv",
"sameAs":["https://www.linkedin.com/company/…"]}
</script>Lapas nosaukums pārāk īss vai pārāk garš
<title> ir 11 rakstzīmes garš. Saprātīgi ir aptuveni 30–60 rakstzīmes: pietiekami aprakstošs, lai nosauktu tēmu, pietiekami īss, lai netiktu nogriezts.
Lūk, kas jums būtu jādara: Uzrakstiet kodolīgu nosaukumu, kurā ietverta tēma un nepieciešamības gadījumā zīmols.
Nav tieši viens H1 virsraksts
Lapā ir 0 H1 virsraksti. Viens nepārprotams H1 pasaka cilvēkiem un mašīnām, par ko lapa galvenokārt ir.
Lūk, kas jums būtu jādara: Iestatiet tieši vienu H1, kas nosauc lapas galveno tēmu. Viss zem tā sākas ar H2.
Meta apraksta nav vai tas neatbilst
Meta apraksts ir 0 rakstzīmes garš. Tas bieži ir pirmais, ko MI sistēmas un meklētājprogrammas lasa kā lapas kopsavilkumu.
Lūk, kas jums būtu jādara: Uzrakstiet patstāvīgu lapas kopsavilkumu vienā vai divos teikumos (aptuveni 120–200 rakstzīmes), nevis atslēgvārdu rindu.
Nav llms.txt
Adresē /llms.txt nav faila. llms.txt ir īss jūsu galvenā satura Markdown pārskats, ko dažas MI sistēmas izmanto orientācijai.
Lūk, kas jums būtu jādara: Izveidojiet /llms.txt: H1 ar nosaukumu, īsu rindkopu par piedāvājumu un saišu sarakstu uz galvenajām lapām.
# Jūsu uzņēmums > Apraksts vienā teikumā. ## Svarīgas lapas - [Produkts](https://jusu-domens.lv/produkts): … - [Cenas](https://jusu-domens.lv/cenas): … - [Par mums](https://jusu-domens.lv/par-mums): …
Uzticamības un vienības signāli (E-E-A-T)
Nav autora vai autorības signāla
Nav atpazīstama autora (ne meta birkas, ne rel=author, ne JSON-LD Person). „Pieredzei“ un „ekspertīzei“ E-E-A-T nozīmē svarīga ir nosaukta, izsekojama autorība.
Lūk, kas jums būtu jādara: Redakcionālam saturam nosauciet autoru vārdā un sasaistiet autora lapu; marķējiet viņu arī kā JSON-LD „Person“.
Nav sameAs sasaistes
JSON-LD trūkst „sameAs“. Ar to MI sistēmas skaidri sasaista jūsu zīmolu vai personu ar zināmām vienībām (Wikidata, LinkedIn, nozares katalogi).
Lūk, kas jums būtu jādara: Pievienojiet „sameAs“ Organization vai Person ar jūsu oficiālo profilu un kataloga ierakstu URL adresēm.
Nav saites uz juridisko informāciju / par mums / kontaktiem
Pārbaudītajā lapā nav atpazīstama saite uz juridisko informāciju, lapu „Par mums“ vai kontaktiem. Šādas lapas ir spēcīgs uzticamības signāls un palīdz vienības sasaistē.
Lūk, kas jums būtu jādara: Sasaistiet juridisko informāciju vai „Par mums“ un kontaktus redzami, parasti katras lapas kājenē.
Nav redzama vai marķēta datuma
Nav atpazīstama publicēšanas vai izmaiņu datuma (ne <time>, ne article:published_time, ne datePublished JSON-LD). Daudziem jautājumiem MI sistēmas dod priekšroku aktuāliem avotiem.
Lūk, kas jums būtu jādara: Saturam ar laika saistību parādiet datumu redzami un marķējiet datePublished / dateModified JSON-LD.
Tehniskais pamats
Nav canonical URL
Lapa neiestata <link rel="canonical">. Bez canonical var palikt neskaidrs, kura versija ir noteicošā, ja ir vairākas URL varianta versijas.
Lūk, kas jums būtu jādara: Katrā lapā iestatiet uz sevi norādošu <link rel="canonical"> ar vēlamo URL.
Kārtībā (3)
- Sitemap ir pieejams.
- Ātrs servera atbildes laiks.
- Nav noindex — lapu drīkst indeksēt.
Nākamie soļi
- MI meklēšanas boti ir bloķēti robots.txt. Katram botam pārbaudiet, vai bloķēšana ir apzināta. Ja vēlaties izslēgt tikai MI apmācību, bloķējiet apmācības botus (GPTBot, ClaudeBot, Google-Extended) un atļaujiet meklēšanas botus.
- Serveris bloķē robotus, lai gan robots.txt tos atļauj. Pievienojiet vēlamo MI robotu lietotāja aģentus un/vai IP diapazonus atļauto sarakstam savā WAF / Cloudflare / ugunsmūrī. Pārbaudiet tos ar reverso DNS, nevis tikai pēc lietotāja aģenta virknes.
- Ļoti maz teksta HTML. Pārliecinieties, ka faktiskais saturs pilnībā ir HTML, nevis attēlos, iframe vai ar JavaScript ielādētos blokos.
Iknedēļas atkārtota skenēšana ar e-pasta brīdinājumu pie katras izmaiņas. Sagatavošanā — ievadiet savu adresi.
Metode un robežas
Pārbaudīts 24.09.2026.. citeglass caur HTTP ielādē nytimes.com un saistītos failus (robots.txt, llms.txt, sitemap.xml) — vienreiz kā parastu pārlūku, vienreiz katram MI robota lietotāja aģentam. JavaScript netiek izpildīts. Laiks līdz pirmajam baitam: 99 ms.
Kas tas nav: Nekāda pozīciju vai citēšanas izsekošana, nekāds apgalvojums, vai modelis jūs patiešām min, un nekāda ar JavaScript ielādēta satura pārbaude. Momentuzņēmums no viena servera IP skatpunkta.