Генератор robots.txt

Создайте базовый robots.txt для сайта: настройте индексацию, sitemap и дополнительные запреты.

Подходит как стартовый шаблон. Перед публикацией проверьте правила под структуру своего сайта.

Настройки

Домен сайта

Основное правило

Дополнительные Disallow — по одному пути в строке

Sitemap URL

User-agent: *

Просканируйте сайт или вставьте URL и получите готовую XML-карту сайта.

Создайте готовые meta title, description и другие теги для страницы.

Проверьте скорость загрузки страницы и основные показатели сайта.