#crawlers

Cómo escribir un robots.txt que realmente bloquee scrapers de IA

robots.txt puede bloquear muchos rastreadores de IA, pero solo cuando está escrito con precisión, y solo para bots que deciden obedecerlo.