SEO & Discoverability
Ako napísať robots.txt, ktorý skutočne blokuje AI scrapery
robots.txt dokáže zablokovať mnohé AI crawlery, ale iba vtedy, keď je napísaný presne — a iba pri botoch, ktoré sa ho rozhodnú rešpektovať.
11 min čítania