Генерирование robots.txt

Создание Robots.txt

С помощью этого сервиса Вы можете сгенерировать файл robots.txt для своего сайта.

Адрес сайта:
Полный запрет индексации сайта?
Crawl-delay (задержка индексирования в секундах)
Запреты для всех поисковых роботов
Запрет директорий (через запятую)
Запрет файлов (через запятую)
Запреты для картиночных ботов
Полный запрет индексации картинок?
Запрет директорий (через запятую)
Запреты программ скачивания сайтов (оффлайн браузеры)
Запрет скачивания сайта:
Главный сайт для Yandex
Включить?
Главный сайт
Карта сайта