Блог за уеб технологии, маркетинг и SEO, мотивация и продуктивност
Защо robots.txt не е защита – нито от Google, нито от AI

Две години хиляди блогъри дописвахме едни и същи редове в robots.txt: Disallow за GPTBot, за CCBot, за ClaudeBot. „Сега съм защитен.", а не е вярно.









