SEO & Discoverability
Hoe je een robots.txt schrijft die AI-scrapers echt blokkeert
robots.txt kan veel AI-crawlers blokkeren, maar alleen wanneer het precies is geschreven—en alleen voor bots die ervoor kiezen zich eraan te houden.
9 min lezen