Что такое файл Robots.txt и как его настроить. Примеры составления индексного файла и инструменты проверки. 

Узнайте, что такое карта сайта, как создать sitemap.xml несколькими способами, и какие ошибки чаще всего допускают при создании XML карты сайта.