ByteDancen Bytespider

Bytespider on ByteDancen (TikTok, Doubao) indeksointirobotti ja yksi verkon aktiivisimmista tekoälyboteista.

Maine ja käytös

Bytespider herätti aiemmin huomiota korkealla indeksointitiheydellä ja epäyhtenäisellä robots.txt:n noudattamisella. Monelle ylläpitäjälle se on estoehdokas, jos kiinnostusta Kiinan markkinoihin ei ole.

Estäminen

”User-agent: Bytespider” ja sen perässä ”Disallow: /”. Koska noudattamista ei taata, suositellaan lisäksi WAF- tai palomuurisääntöä user-agent-merkkijonolle.

Milloin sallia

Se, joka haluaa näkyä kiinankielisellä alueella — esimerkiksi Doubaon kautta — kannattaa sallia Bytespider ja rajoittaa palvelimen kuormaa sen sijaan nopeusrajoituksilla.

Tarkista pääsy

citeglass hakee sivusi Bytespiderin user-agentilla ja näyttää, täsmäävätkö robots.txt-sääntö ja palvelimen vastaus.

Tarkista oma sivustosi

citeglass näyttää noin 30 sekunnissa, missä sivustosi on tekoälyjärjestelmille lukukelvoton — ilmaiseksi ja ilman kirjautumista.

Lue lisää

Yleistä tietoa, ei oikeudellista neuvontaa. GEO on nuori ala — suositukset voivat muuttua.