Meer dan de helft van het internetverkeer is geen mens meer: zo bepaal je gratis wat AI-bots met je site mogen

Wat is er nieuw

Cloudflare, het bedrijf waar naar eigen zeggen ruim 20% van alle websites achter draait, publiceerde woensdag nieuwe cijfers over wie er eigenlijk op je site komt. Meer dan de helft van het verkeer is geen mens meer. Het aantal verzoeken van AI-agents, de assistenten die namens iemand iets opzoeken of regelen, groeide in een jaar met ruim 1.700%. In sectoren als retail, software en financiële dienstverlening daalde het menselijke bezoek volgens Cloudflare in minder dan een jaar met tot 40%.

Voor jou als site-eigenaar is vooral dit belangrijk: je hoeft niet meer te kiezen tussen alles toelaten of alles blokkeren. Cloudflare verdeelt AI-bots in drie soorten, die je los van elkaar aan of uit zet. Die driedeling bestaat al langer; nieuw zijn de cijfers en de instelling van 15 september.

• Zoeken: bots die je pagina’s ophalen om je te tonen in zoekresultaten en AI-antwoorden.
• Agents: assistenten die namens een klant je site bezoeken, bijvoorbeeld om een product te vergelijken of te bestellen.
• Training: bots die je teksten en beelden verzamelen om een taalmodel mee te trainen.

Sinds 15 september is er daarnaast een instelling die training verbiedt terwijl je gewoon vindbaar blijft. Apple, Google en Microsoft hebben volgens Cloudflare toegezegd zich eraan te houden. Opvallend: pas 17% van de sites bij Cloudflare blokkeert trainingsbots, en minder dan 1% blokkeert zoekbots.

Nieuw sinds woensdag is ook Pay Per Use, een proef waarbij AI-bedrijven betalen als ze je content echt gebruiken. Je ziet de aanbiedingen in het dashboard onder Monetize, Pay Per Use, en Cloudflare regelt de afrekening en betaalt maandelijks uit. Het is een bèta, en Cloudflare zegt niet voor welke landen of abonnementen het al openstaat.

Wat kost het

Niets. De keuze per soort bot zit volgens Cloudflare in elk abonnement, ook het gratis. Wat Pay Per Use oplevert, hangt af van wat een AI-bedrijf biedt; of Cloudflare daar zelf een deel van houdt, is niet bekendgemaakt.

Voor wie wel, voor wie niet

Wel: iedereen met een website of webshop die via Cloudflare loopt. Wil je dat klanten je vinden via ChatGPT, Gemini of Copilot, laat zoeken en agents dan aan staan. Dat wordt belangrijker nu AI-agents ook zelf afrekenen in webshops. Leef je van je eigen teksten, foto’s of cursusmateriaal, zet training dan uit.

Niet: draait je site niet via Cloudflare, dan heb je deze knoppen niet. Vraag je webbouwer of hostingpartij wat zij aan AI-bots toelaten. En reken je niet rijk met Pay Per Use: voor een gewone bedrijfssite is het voorlopig een proef, geen inkomstenbron.