Marketing en verkoopdo 15 okt
Blokkeer je AI-bots op je website? Een kwart van de grote .nl-sites weert de trainingsbot van ChatGPT, maar elf zeggen niets over de zoekbot
Van 142 grote Nederlandse websites blokkeert 26% de trainingsbot van OpenAI in robots.txt, blijkt uit onderzoek op Frankwatching. Elf van die sites, waaronder de NOS en BNR, noemen de aparte zoekbot van ChatGPT nergens, zodat onduidelijk is of ze wel gevonden willen worden als een klant iets in ChatGPT opzoekt. Check je eigen robots.txt in twee minuten.
Wat kun je ermee?Typ jouwdomein.nl/robots.txt in je browser, zoek op GPTBot, OAI-SearchBot, Google-Extended, ClaudeBot en PerplexityBot, en bepaal per bot of hij je teksten mag lezen voor training, voor zoekresultaten, of niet.