Mijn eigen tool
Meer dan de helft van het verkeer op het web is geautomatiseerd: zoekmachines, AI-assistenten, previewbots en scrapers. Ze bepalen je posities in Google, of AI je noemt, en steeds vaker waar je klanten vandaan komen. Toch zie je ze in Google Analytics niet. Daarom bouwde ik BotSights.
Het begon met een vraag die ik voor mijn eigen websites niet kon beantwoorden: leest AI mijn content? ChatGPT en Perplexity citeerden duidelijk pagina's en stuurden bezoekers door, maar in Google Analytics zag ik daar niets van. Het verkeer was er wel. Alleen de meting bestond niet.
Het antwoord zat in de serverlogs, verstopt tussen miljoenen regels zonder label. Dus bouwde ik wat ontbrak: herkenning die elke geautomatiseerde bezoeker een naam geeft, een controle of een bot echt is wie hij zegt te zijn, en een dashboard dat die bezoekjes vertaalt naar beslissingen over content, crawlen en blokkeren.
Wat begon als een interne tool voor een handvol sites, groeide uit tot een platform met een openbare database van meer dan 1.900 bots en agents. Ik draai elke nieuwe functie eerst op mijn eigen websites, zodat hij op echt verkeer getest is voordat hij bij jou terechtkomt.
Voor mij is het de volgende stap in mijn werk als SEO-specialist. Vindbaarheid houdt niet meer op bij Google. Wil je gevonden worden in AI-antwoorden, dan wil je ook kunnen meten of dat lukt.
BotSights herkent elke geautomatiseerde bezoeker van je website en laat zien wat die bezoekjes betekenen. De belangrijkste onderdelen:
AI en LLM
Elke keer dat ChatGPT, Claude, Perplexity of Gemini een pagina van je website ophaalt om een vraag te beantwoorden, ziet BotSights dat. Per AI-systeem en per pagina.
Daarnaast meet BotSights hoeveel mensen daarna echt doorklikken vanuit een AI-antwoord. Zo zie je niet alleen of je geciteerd wordt, maar ook of dat bezoekers oplevert.
Kansen
Sommige pagina's worden vaak door AI gebruikt, terwijl er bijna niemand op doorklikt. Je content helpt dan het AI-antwoord, maar levert jou weinig op.
BotSights zet die pagina's op een rij. Dat is een concrete lijst om mee aan de slag te gaan: een sterkere call-to-action, of informatie die mensen alleen op jouw site vinden.
Social
Deelt iemand een link naar je website in WhatsApp, LinkedIn, Facebook of Slack, dan haalt dat platform eerst een voorbeeld op. Die bezoekjes ziet BotSights.
Zo zie je welke pagina's gedeeld worden en via welk platform, ook in privéchats waar je normaal geen zicht op hebt. En hoeveel van die shares tot een bezoek leiden.
Zoekmachines
BotSights laat zien welke pagina's Google, Bing en andere zoekmachines crawlen en hoe vaak. Handig om te zien of nieuwe pagina's worden opgepikt, of na een migratie.
Elke bot die zegt wie hij is, wordt gecontroleerd tegen de officiële IP-ranges en via reverse DNS. Er zijn drie uitkomsten: geverifieerd, nep of niet te controleren. Zo zie je welke 'Googlebots' eigenlijk scrapers zijn, en welke bots je met een gerust hart kunt blokkeren.
BotSights beantwoordt de vragen die je als website-eigenaar nu echt hebt.
Zie per AI-systeem en per pagina hoe vaak je content wordt opgehaald, en of je zichtbaarheid in AI groeit.
Zie of zoekmachines en AI-crawlers een nieuwe pagina al bezocht hebben, zonder af te wachten tot hij ergens verschijnt.
Vergelijk citaties met echte klikken, en vind de pagina's waar AI veel van leent maar weinig voor teruggeeft.
Herken nep-crawlers en bots die alleen serverkracht kosten, en blokkeer gericht in plaats van op de gok.
BotSights meet aan de serverkant: op het moment dat een verzoek bij je website binnenkomt. Daardoor ziet het ook de bezoekers die geen JavaScript uitvoeren, en dat zijn bijna alle bots.
Geen cookies, geen JavaScript bij je bezoekers, geen fingerprinting. Mensen worden geteld, niet gevolgd, en hun IP-adres wordt geanonimiseerd. De gedetailleerde gegevens gaan over bots, want die zijn het onderwerp.
Wil je weten wat de cijfers betekenen voor je vindbaarheid? Lees meer over GEO, mijn aanpak om gevonden te worden in AI-antwoorden, of check met de gratis SEO- en AI-check of AI-crawlers je pagina's kunnen lezen.
Google Analytics meet bezoekers via JavaScript in de browser. Bots en AI-crawlers voeren dat script niet uit, dus die zie je daar niet. BotSights meet aan de serverkant en ziet daardoor juist het verkeer dat Analytics mist.
Nee. BotSights plaatst geen cookies en laadt geen JavaScript bij je bezoekers. Mensen worden alleen geteld, niet gevolgd, en hun IP-adres wordt geanonimiseerd. De gedetailleerde gegevens gaan over bots.
Ja, er is een WordPress-plugin. Daarnaast werkt BotSights via een Cloudflare Worker, Cloudflare Logpush, middleware voor Node.js, Python en PHP, of de API.
De gratis check is een momentopname: mogen AI-crawlers je pagina lezen, en is hij goed te citeren? BotSights meet doorlopend wie er echt langskomt: welke AI-systemen je content ophalen, hoe vaak, op welke pagina's, en of dat bezoekers oplevert.
Plan een vrijblijvend gesprek van 30 minuten. Ik kijk vooraf naar je website en vertel je waar de kansen liggen, in Google en in AI-antwoorden.