Выполню создание или настройку файлов robots.txt и sitemap.xml для вашего веб-ресурса всего за 500 рублей.

Выполню создание или настройку файлов robots.txt и sitemap.xml для вашего веб-ресурса всего за 500 рублей.

1. Что такое файл robots.txt?
2. Как создать файл robots.txt?
3. Какие инструкции можно указать в файле robots.txt?
4. Как проверить правильность файла robots.txt?
5. Где располагается файл robots.txt?
6. Какой формат имеет файл robots.txt?
7. Как добавить новые директивы в файл robots.txt?
8. Как запретить поисковым роботам индексацию определенных страниц?
9. Можно ли использовать мастер файл robots.txt?
10. Как обновить файл robots.txt?
11. Какие ошибки могут возникнуть при использовании