Пользователь Dimitri

Robots.txt по-русски!

Как работать с файлом robots.txt, частые ошибки, часто задаваемые вопросы. Роботы Рунета.