Jos robots.txt-tiedostosi estää GPTBotin, PerplexityBotin, ClaudeBotin tai Google-Extendedin, nuo koneet eivät voi lukea sivustoasi — eivätkä suosittele sitä. Liitä URL-osoitteesi ja saat aidon luvun reaaliaikaisesta robots.txt-tiedostostasi sekä näet täsmälleen, mitkä tekoälyrobotit on sallittu tai estetty. Ilman rekisteröitymistä.
Tekoälykoneet voivat suositella vain sitä, minkä ne voivat lukea. Yksi liian laaja Disallow-rivi robots.txt-tiedostossa voi hiljaa poistaa sinut ChatGPT:stä, Perplexitystä, Claudesta ja Geministä — yksi yleisimmistä ja näkymättömimmistä näkyvyysvirheistä.
Jotkin sivustot estävät tekoälyrobotit tarkoituksella suojatakseen sisältöä; useimmat haluavat näkyvyyttä. Joka tapauksessa sinun pitäisi tietää nykytilasi. Tämä työkalu yksinkertaisesti raportoi, mitä robots.txt-tiedostosi sanoo tänään, jotta päätös on tietoinen eikä vahingossa tapahtunut.
Jos robotti on estetty, poista tai kavenna kyseisen user-agentin Disallow-sääntö robots.txt-tiedostossa ja tarkista uudelleen. Kun pääsy on korjattu, varmista, että sisältösi on staattisessa HTML:ssä (ei pelkän JavaScriptin takana), jotta robotit todella näkevät sen — ilmainen Beacon-tili mittaa tämän renderöintieron koko sivustollasi.
Liitä URL-osoitteesi yllä. Beacon lukee reaaliaikaisen robots.txt-tiedostosi ja raportoi, ovatko GPTBot, PerplexityBot, ClaudeBot ja Google-Extended sallittuja vai estettyjä.
Se riippuu tavoitteistasi. Estäminen suojaa sisältöä koulutus- ja vastauskäytöltä, mutta poistaa sinut myös tekoälysuosituksista. Useimpien näkyvyyttä tavoittelevien brändien kannattaa sallia ne.
Kyllä — se on aito haku /robots.txt-tiedostostasi tarkistushetkellä, jäsennettynä kullekin tekoälyrobotin user-agentille. Mitään ei keksitä.
Robottien salliminen on ensimmäinen askel; ne tarvitsevat myös luettavaa HTML:ää. Jos sisältösi ilmestyy vasta JavaScriptin suorituksen jälkeen, robotit näkevät tyhjän kuoren. Ilmainen Beacon-tili mittaa tämän renderöintieron.
Ilmainen, aito, ilman rekisteröitymistä — katso, kuka voi lukea sivustosi.