WebExpress | Генератор файла Robots.txt
Примечание:
Сервис необходим для генерации файла robots.txt. Файл robots.txt предназначен для корректной индексации поисковиками страниц вашего сайта, что позволяет разрешить / запретить индексацию некоторых разделов вашего сайта. Данный файл необходимо размещать в корневой папке вашего сайта.
В поле "Робот [ User-agent ]" выберите какой поисковик вам необходим для индексации, в поле "Disallow" выберите какой раздел вашего сайта разрешить / запретить к индексации. Полученный код скопируйте в файл robots.txt и загрузите на ваш сайт.
|
