Robottien ja indeksoinnin hallinta
X-Robots-Tag
X-Robots-Tag on HTTP-vastausotsake, joka voi sisältää minkä tahansa robots-metatagin säännön, kuten noindexin tai nosnippetin.
Selkeästi sanottuna
Metatagi toimii vain HTML-sivun sisällä. Otsake toimii mille tahansa tiedostolle, jonka palvelimesi lähettää.
Siksi sillä hallitaan PDF-tiedostoja, kuvia ja videoita.
Säännöt ilman robotin nimeä koskevat kaikkia robotteja. Googlen mukaan otsakkeen nimi ja arvot eivät ole kirjainkoon suhteen tarkkoja.
Esimerkki
Yritys julkaisee hinnastonsa PDF-tiedostoina eikä halua niiden näkyvän Googlessa. Palvelin lähettää alla olevan otsakkeen jokaisen PDF:n mukana.
HTTP/1.1 200 OK
Content-Type: application/pdf
X-Robots-Tag: noindexMiksi tällä on väliä tekoälyhaussa
Hakukoneet voivat noudattaa sitä vain, jos ne saavat hakea tiedoston.
Voit yhdistää useita sääntöjä yhteen otsakkeeseen pilkuilla erotettuina.
Mitä voit tehdä
- Käytä sitä tiedostoille, joissa ei ole HTML:ää, kuten PDF-tiedostoille.
- Määritä se palvelimellasi tai CDN:ssäsi.
- Tarkista vastausotsakkeet selaimesi kehittäjätyökaluista julkaisun jälkeen.
Sekoitetaan usein näihin
- Robots-metatagi
- Samat säännöt, eri paikka: metatagi on HTML:ssä; X-Robots-Tag on HTTP-vastauksessa.
- robots.txt
- robots.txt ohjaa läpikäyntiä polun mukaan. X-Robots-Tag ohjaa indeksointia ja katkelmia vastauskohtaisesti.
Lähteet
- Google Search Central: Robots meta tag, data-nosnippet, and X-Robots-Tag specifications
- Google Search Central: Block Search indexing with noindex
Faktat ja lähteet tarkistettu viimeksi 19. lokakuuta 2026.
Liittyvät termit
Lue lisää GEO-Scoresta
Miten sivusi pärjää tekoälyhaussa?
GEO-Score tarkistaa sivun 22 signaalin avulla tekoälyrobottien pääsystä rakenteiseen dataan ja näyttää, mitä kannattaa korjata ensin.
Analysoi sivu