О регистре букв в файле robots.txt

Оказывается, не все в курсе, что в содержимом директив файла robots.txt учитывается регистр букв.

Документация Яндекса: 

"Робот учитывает регистр в написании подстрок (имя или путь до файла, имя робота) и не учитывает регистр в названиях директив."

Документация Google:

"Правила в файле robots.txt указываются с учетом регистра."

Будьте внимательны.

Share this